안녕하세요 👋
저에 대한 상세한 정보는 CV_Hanmil Lee에서 확인하실 수 있습니다
Recent Post
Spark UI 살펴보기
Spark job, stage, task 용어 정리 및 UI 살펴보기
ETL
ELT
spark
기술면접
Data Engineering
DE
2024년 04월 29일
sd 카드 없이 가정용 cctv 영상(tapo C210) 저장하기
sd 카드 없이 개인 nas, 미니 PC, cloud에 가정용 cctv 영상 저장하기
self-host
2024년 02월 13일
Self-host 어플리케이션들로 홈 서버 만들기
홈 서버 / NAS 에서 돌릴만한 도커-애플리케이션 소개: Portainer, Home Assistant, AdGuard Home, photoprism, immich, Ghost 등
self-host
2023년 10월 02일
TCP 송수신 디테일
소켓 프로그램 개발자, 운영체제 개발(혹은 튜닝) 가능자, 네트워크 관리자...이 세 가지 관점을 모두 이해하면 알 수 있는 TCP Segment 송수신 원리
Linux
OS
2023년 08월 19일
AWS Leadership Principles 이해하기
AWS Leadership Principles 이해해보자
Tech interview
IT
AWS
2023년 07월 30일
AWS CSE - BIG DATA
AWS CSE BIG DATA (BGDA) 포지션 테크면접 대비 정리
Tech interview
기술면접
BigData
Hadoop
YARN
Hbase
AWS
2023년 07월 23일
이것저것 CS 개념들
네트워크, OS 등등 기술면접 대비. 쓰고보니 대부분 네트워크 위주….
Linux
OS
Tech interview
기술면접
CS
Computer Science
2023년 07월 21일
AWS Certified Solutions Architect - Professional
AWS SAP - C02 준비하기. AWS SAP C01 vs C02
AWS
SAP-C02
2023년 07월 17일
Gradle 이해하기: 초보자를 위한 완벽한 가이드
빌드 도구인 Gradle의 기본 개념을 설명하고, 설치부터 프로젝트 설정, 의존성 관리, 태스크 이해, 플러그인 사용까지 Gradle을 효과적으로 사용하는 방법을 초보자를 위해 상세히 안내합니다.
Gradle
빌드도구
의존성관리
2023년 05월 29일
Polars vs Dask vs Pandas 2.0 vs Spark
Supercharge Your Data Analysis: Comparing Polars, Dask, Pandas 2.0, and Apache Spark
Data Engineering
DE
Polars
Dask
Pandas
spark
2023년 04월 30일
Apache Hudi vs Delta Lake vs Apache Iceberg
Apache Hudi, Delta Lake, Apache Iceberg feature, pros and cons
DE
Data Engineering
Deltalake
Apache Hudi
Apache Iceberge
2023년 04월 29일
Yarn이란
Hadoop Yarn이란 무엇인가? 자원 관리와 작업 스케줄링의 혁신
DE
Data Engineering
Hadoop
YARN
2023년 03월 22일
spark hw spec 산정을 위해 고려할점
spark hw spec 산정을 위해 고려할점
spark
Data Engineering
DE
2023년 03월 21일
HBase에 대해 알아보자
하둡 기반의 분산 데이터베이스 소개
Hbase
DE
Data Engineering
2023년 03월 16일
Apache Spark, Parallel Distributed Processing
Summary of Spark & Flink for Real-time Big Data Processing - part2
spark
DE
Data Engineering
2023년 02월 19일
![Intro [Spark & Flink for Real time Big Data Processing]](/_next/image?url=https%3A%2F%2Fimages.unsplash.com%2Fphoto-1543674892-7d64d45df18b%3Fixlib%3Drb-4.0.3%26q%3D80%26fm%3Djpg%26crop%3Dentropy%26cs%3Dtinysrgb&w=3840&q=75)
Intro [Spark & Flink for Real time Big Data Processing]
Summary of Spark & Flink for Real-time Big Data Processing - part1
spark
flink
DE
Data Engineering
kafka
2023년 02월 19일
GCP 자격증 준비
2022년 09월 08일
LDAP 간단소개
LDAP에 대해 알아보자~
Computer Science
CS
LDAP
2022년 08월 14일
Nifi cluster setup
Nifi 관련된 내용 총 정리 해보자
Nifi
Data Engineering
DE
ETL
2022년 07월 01일
구글 드라이브 파일 wget, curl 하기
wget, curl의 차이점, 구글드라이브 파일 wget, curl 하기
Linux
2022년 05월 31일
Tech interview를 위한 CS
기술면접 대비를 위한 CS기본 개념 정리
Tech interview
기술면접
CS
Computer Science
2022년 05월 11일
집에서 회사, 학교 PC 원격 접속하기 (SSH Tunneling)
내부망 공유기의 포트포워딩 없이, SSH Tunnerling으로 외부망PC에서 내부망 PC를 접속해보자
SSH Tunneling
port forwarding
2022년 04월 05일
dataframe ‘2D list’ value 전처리
Dataframe에 (500x3) list있는 경우, 각 row별로 (500 row) x (3 columns) 꼴로 만들기
ML
Machine Learning
2022년 03월 25일
시계열 데이터 feature 추출, 선택
"Time Series Feature extraction based on scalable hypothesis tests"
tsfresh
DE
Data Engineering
ML
Machine Learning
2022년 03월 25일
MLOps 간단 정리
MLOps 알아보기
ML
Machine Learning
AI
Artificial Intelligence
MLOps
2022년 01월 13일
Greenplum Database 소개 및 장단점
Unveiling Greenplum Database: A Comprehensive Guide to its Pros, Cons, and Advanced Features
DE
Data Engineering
GPDB
GreenplumDatabase
2022년 01월 13일
관계형DB vs 컬럼형DB
관계형DB와 컬럼형DB에 대해 알아보자. 근데 이제 PostgreSQL과 cassandra를 곁들인
DE
Data Engineering
PostgreSQL
Apach Cassandra
2022년 01월 02일
EUV가 중요해지는 이유
옹스트롬 시대를 여는 열쇠, EUV에 대하여
반도체
삼성전자
하이닉스
2021년 12월 30일
Process와 Thread 간단 정리
프로세스는 뭐고 스레드는 뭔가요?
Process
Thread
2021년 12월 30일
하둡(Hadoop)이란 - HDFS, Map-reduce, Spark
하둡 기초 개념, 몇몇 에코시스템(HDFS, Map-reduce, Spark)에 대해 알아보자
Hadoop
DE
Data Engineering
2021년 12월 17일
Notion 블로그 만들때 참고했던 것들
무료 Notion 블로그 만들때 참고 했던 links
Notion
Blog
2021년 12월 12일
ETL vs ELT 비교하기
ETL vs ELT: key Differences
ETL
ELT
DE
Data Engineering
2021년 12월 12일
2021년 Data Engineering 트렌드
The 2021 Machine learning, AI and Data (MAD) Landscape 중 Data engineering 부분 정리
DE
Data Engineering
2021년 12월 12일
반도체 기본 개념 정리
Hello chips 정리 내용
반도체
삼성전자
하이닉스
2021년 04월 25일
자료구조와 알고리즘
자료구조와 알고리즘 개념 정리 - 대기업 코딩테스트 준비
자료구조
알고리즘
2021년 04월 25일
Linux
리눅스 기본 구조와 명령어
Linux
IT
2021년 04월 25일