Jay's Cookbook
Menu
  • Tags
  • Categories
  • Projects
Computer Science
OS
Network
Data Structure
Algorithm
Language
Code Architecture
Python
Javascript
Typescript
Java
Backend
Backend Theory
TypeORM
Node.js
NestJS
FastAPI
Frontend
HTML/CSS
React
Next.js
Data Engineering
DE Theory
MySQL
MongoDB
Elastic
Redis
Kafka
Spark
Airflow
AI
Basic
Pytorch
NLP
Computer Vision
Data Analytics
Statistics
Pandas
Matplotlib
DevOps
Git
Docker
Kubernetes
AWS
58 Posts

Data Engineering

07 Mar 2021 [MySQL] Intro
data_engineering
mysql

[MySQL] Intro

데이터베이스를 체계적으로 작동할 수 있도록 돕는 소프트웨어가 나오게 되었으며 이를 DBMS라고 한다

11 Mar 2021 [MySQL] DML(1): SELECT 기초
data_engineering
mysql

[MySQL] DML(1): SELECT 기초

12 Mar 2021 [MySQL] DML(2): SELECT 중급 JOIN, SUBQUERY
data_engineering
mysql

[MySQL] DML(2): SELECT 중급 JOIN, SUBQUERY

13 Mar 2021 [MySQL] DML(3): SELECT 중급 WINDOW
data_engineering
mysql

[MySQL] DML(3): SELECT 중급 WINDOW

21 Mar 2021 [MySQL] DML(4): INSERT, UPDATE, DELETE
data_engineering
mysql

[MySQL] DML(4): INSERT, UPDATE, DELETE

23 Mar 2021 [MySQL] DDL: CREATE, ALTER, RENAME, DROP, TRUNCATE
data_engineering
mysql

[MySQL] DDL: CREATE, ALTER, RENAME, DROP, TRUNCATE

26 Mar 2021 [MySQL] DCL: GRANT, REVOKE
data_engineering
mysql

[MySQL] DCL: GRANT, REVOKE

27 Mar 2021 [MySQL] TCL: COMMIT, ROLLBACK, SAVEPOINT
data_engineering
mysql

[MySQL] TCL: COMMIT, ROLLBACK, SAVEPOINT

28 Mar 2021 [MySQL] 유틸리티(View, CTE, Trigger, Function, Procedure, Cursor)
data_engineering
mysql

[MySQL] 유틸리티(View, CTE, Trigger, Function, Procedure, Cursor)

29 Mar 2021 [MySQL] 인덱스 명령어
data_engineering
mysql

[MySQL] 인덱스 명령어

01 Apr 2021 [MySQL] 백업, 복제 명령어
data_engineering
mysql

[MySQL] 백업, 복제 명령어

03 Apr 2021 [MySQL] 내장 함수 모음
data_engineering
mysql

[MySQL] 내장 함수 모음

03 Apr 2021 [MySQL] 데이터 타입
data_engineering
mysql

[MySQL] 데이터 타입

17 Jan 2022 Kafka Series [Part1]: What is Kafka
data_engineering
kafka

Kafka Series [Part1]: What is Kafka

Kafka는 이러한 데이터를 수집, 가공, 저장해주는 Event streaming platform입니다.

23 Jan 2022 Kafka Series [Part2]: Main elements of Kafka
data_engineering
kafka

Kafka Series [Part2]: Main elements of Kafka

프로듀서는 메세지의 전송, 브로커는 저장, 컨슈머는 읽어가는 역할을 담당합니다.

23 Jan 2022 Kafka Series [Part4]: 카프카의 데이터 저장
data_engineering
kafka

Kafka Series [Part4]: 카프카의 데이터 저장

24 Jan 2022 Kafka Series [Part3]: Fault tolerance in Kafka
data_engineering
kafka

Kafka Series [Part3]: Fault tolerance in Kafka

이러한 이유로 카프카는 초기 설계 단계에서부터 장애가 발생하더라도 안정적인 서비스를 제공할 수 있도록 구상됐습니다.

27 Jan 2022 Kafka Series [Part5]: 실습을 통한 카프카 명령어와 옵션
data_engineering
kafka

Kafka Series [Part5]: 실습을 통한 카프카 명령어와 옵션

28 Jan 2022 Kafka Series [Part6]: 데이터 파이프라인에서 카프카를 사용하는 목적
data_engineering
kafka

Kafka Series [Part6]: 데이터 파이프라인에서 카프카를 사용하는 목적

30 Jan 2022 Kafka Series [Part7]: Kafka Listeners – Explained[번역]
data_engineering
kafka

Kafka Series [Part7]: Kafka Listeners – Explained[번역]

카프카 클라이언트가 카프카에 연결되기 위해서는 advertised.listeners를 external IP 주소로 설정해야 합니다.

31 Jan 2022 Kafka Series [Part8]: Client Won’t Connect to Apache Kafka Cluster in Docker/AWS/My Laptop.[번역]
data_engineering
kafka

Kafka Series [Part8]: Client Won’t Connect to Apache Kafka Cluster in Docker/AWS/My Laptop.[번역]

클라이언트와 카프카간의 메세지를 주고받기 위해서는 두 가지의 연결이 반드시 선행되어야 한다.

05 Feb 2022 Airflow Series [Part1]: What is Airflow
data_engineering
airflow

Airflow Series [Part1]: What is Airflow

05 Feb 2022 Airflow Series [Part2]: Airflow Command
data_engineering
airflow

Airflow Series [Part2]: Airflow Command

05 Feb 2022 Airflow Series [Part3]: Orchestration for Machine Learning
data_engineering
airflow

Airflow Series [Part3]: Orchestration for Machine Learning

05 Feb 2022 Airflow Series [Part4]: 에어플로우 도입 사례
data_engineering
airflow

Airflow Series [Part4]: 에어플로우 도입 사례

05 Feb 2022 Airflow Series [Part5]: 스케줄링
data_engineering
airflow

Airflow Series [Part5]: 스케줄링

05 Feb 2022 Airflow Series [Part6]: 템플릿 변수
data_engineering
airflow

Airflow Series [Part6]: 템플릿 변수

05 Feb 2022 Airflow Series [Part7]: 워크플로 컨트롤
data_engineering
airflow

Airflow Series [Part7]: 워크플로 컨트롤

09 Apr 2022 [MySQL] 아키텍처 (이론)
data_engineering
mysql

[MySQL] 아키텍처 (이론)

11 Apr 2022 Kafka Series [Part10]: MySQL Connector
data_engineering
kafka

Kafka Series [Part10]: MySQL Connector

11 Apr 2022 Kafka Series [Part9]: Kafka Connector
data_engineering
kafka

Kafka Series [Part9]: Kafka Connector

12 Apr 2022 [MySQL] 트랜잭션과 잠금 (이론)
data_engineering
mysql

[MySQL] 트랜잭션과 잠금 (이론)

14 Apr 2022 [MySQL] MySQL의 로그 (이론)
data_engineering
mysql

[MySQL] MySQL의 로그 (이론)

16 Apr 2022 [MySQL] 데이터베이스 모델링 (이론)
data_engineering
mysql

[MySQL] 데이터베이스 모델링 (이론)

17 Apr 2022 [MySQL] 파티션
data_engineering
mysql

[MySQL] 파티션

20 Apr 2022 [MySQL] 테이블과 인덱스
data_engineering
mysql

[MySQL] 테이블과 인덱스

11 May 2022 Kafka Series [Part11]: Python API for Kafka
data_engineering
kafka

Kafka Series [Part11]: Python API for Kafka

01 Jul 2022 [MySQL] 쿼리 튜닝/최적화하기
data_engineering
mysql

[MySQL] 쿼리 튜닝/최적화하기

02 Jul 2022 [MySQL] 성능 최적화
data_engineering
mysql

[MySQL] 성능 최적화

03 Jul 2022 [MySQL] 그라파나를 이용해 MySQL 서버 모니터링 하기
data_engineering
mysql

[MySQL] 그라파나를 이용해 MySQL 서버 모니터링 하기

11 Jul 2022 [MySQL] SQL 문제
data_engineering
mysql

[MySQL] SQL 문제

12 Jul 2022 [MySQL] SQL을 이용한 데이터 분석에서 겪었던 다양한 경험들
data_engineering
mysql

[MySQL] SQL을 이용한 데이터 분석에서 겪었던 다양한 경험들

03 Dec 2023 [Redis] Intro
data_engineering
redis

[Redis] Intro

레디스의 특징과 레디스를 사용하는 이유에 대해 배운다

04 Dec 2023 [Redis] 데이터 타입
data_engineering
redis

[Redis] 데이터 타입

레디스에서 지원하는 다양한 데이터 타입의 종류에 대해 배운다

05 Dec 2023 [Redis] NestJS에서 사용하기 (준비중)
data_engineering
redis

[Redis] NestJS에서 사용하기 (준비중)

레디스를 NestJS에서 사용하는 방법에 대해 배운다

05 Jan 2024 [MongoDB] Intro
data_engineering
mongodb

[MongoDB] Intro

몽고DB는 도큐먼트 기반 NoSQL 오픈소스 데이터베이스이다

06 Jan 2024 [MongoDB] CRUD 쿼리 기본편
data_engineering
mongodb

[MongoDB] CRUD 쿼리 기본편

07 Jan 2024 [MongoDB] 데이터 모델링 (준비중)
data_engineering
mongodb

[MongoDB] 데이터 모델링 (준비중)

08 Jan 2024 [MongoDB] 인덱스 (준비중)
data_engineering
mongodb

[MongoDB] 인덱스 (준비중)

09 Jan 2024 [MongoDB] 쿼리 최적화 (준비중)
data_engineering
mongodb

[MongoDB] 쿼리 최적화 (준비중)

10 Jan 2024 [MongoDB] 트랜잭션 (준비중)
data_engineering
mongodb

[MongoDB] 트랜잭션 (준비중)

11 Jan 2024 [MongoDB] 복제 (준비중)
data_engineering
mongodb

[MongoDB] 복제 (준비중)

12 Jan 2024 [MongoDB] 백업 및 복구 (준비중)
data_engineering
mongodb

[MongoDB] 백업 및 복구 (준비중)

14 Jan 2024 [MongoDB] 샤딩 (준비중)
data_engineering
mongodb

[MongoDB] 샤딩 (준비중)

14 Jan 2024 [MongoDB] 보안: 인증/권한/암호화 (준비중)
data_engineering
mongodb

[MongoDB] 보안: 인증/권한/암호화 (준비중)

01 Apr 2024 [Data Engineering Thoery] Intro
data_engineering
DE_theory

[Data Engineering Thoery] Intro

01 May 2024 [Data Engineering Thoery] 정규표현식
data_engineering
DE_theory

[Data Engineering Thoery] 정규표현식

05 May 2024 [Data Engineering Thoery] NoSQL
data_engineering
DE_theory

[Data Engineering Thoery] NoSQL

Jay Kim

Jay Kim

Web development, data engineering for human for the Earth. I share posts, free resources and inspiration.

Rest
Lifestyle
Hobby
Hobby
Hobby
Hobby
2025 © Jay's Cookbook. Crafted & Designed by Artem Sheludko.