Kafka와 Spark를 활용한 실시간 데이터 레이크 기초
업계 표준 스트림 처리 도구를 사용하여 확장 가능한 데이터 파이프라인과 최신 스토리지 아키텍처를 구축하는 방법을 배우세요.
-
💬
AI 강사
어떤 강의든 질문하면 언제든 즉시 명확한 답을 받을 수 있어요. -
🕐
언제든지 시작
정해진 일정이나 마감이 없어요 — 원할 때 자신의 속도로 배우세요. -
🌐
한국어로
강의, 과제, 수료증까지 — 모두 완전히 당신의 언어로.
이 과정 소개
오늘날의 데이터 중심 환경에서 정보가 도착하는 즉시 처리하고 저장하는 능력은 모든 데이터 전문가에게 중요한 기술입니다. 이 과정은 대용량 데이터 스트림을 처리하고 이를 기능적이고 현대적인 데이터 레이크로 구성하는 방법을 이해하는 명확한 경로를 제공합니다. 기본적인 메시징 개념을 학습하는 것부터 시작하여 원시 데이터를 실행 가능한 통찰력으로 전환하는 종단 간(end-to-end) 파이프라인을 설계하는 방법을 이해하게 될 것입니다.
학습 내용:
- 고처리량 메시지 스트리밍을 위한 Kafka의 핵심 아키텍처 이해
- 최신 API를 사용하여 실시간으로 데이터를 처리하기 위해 Spark Structured Streaming 구현
- Delta Lake와 같은 안정적인 테이블 형식을 사용하여 데이터 레이크 스토리지 패턴 구성
- 파이프라인 전체에서 데이터 품질을 보장하기 위한 스키마 관리 기술 적용
- 스트리밍 데이터를 수집, 변환 및 저장하는 통합 워크플로우 구축 실습
- 분산 시스템 및 상태 저장 스트림 처리의 기본 개념 학습
이 과정은 스트림 처리 및 스토리지 최적화의 실제 논리로 넘어가기 전에 필수 용어와 분산 메시징의 개념적 구성 요소부터 시작합니다. 이 텍스트 기반 가이드는 데이터 엔지니어링 초보자와 해당 분야의 사전 경험 없이 실시간 아키텍처의 메커니즘을 이해하고자 하는 개발자를 위해 설계되었습니다. 오늘 바로 현대 데이터 엔지니어링의 기초를 다지기 시작하세요.
강의 목차
받게 되는 것
-
📜
수료증
LinkedIn 프로필에 추가 -
💬
개인 AI 튜터
강좌에서 막혔나요? 내장 튜터에게 언제든지 무엇이든 물어보세요. -
🎧
오디오 버전 포함
화면 없이 어디서나 학습 -
♾️
평생 이용
언제든 다시 보세요, 만료 없음 -
📱
휴대폰 또는 컴퓨터
어디서든 모든 기기에서 -
💸
14일 환불
이유 묻지 않음 -
⚡
짧고 핵심적
3시간의 실용 학습
수료증
PickAClass에서 수료하는 모든 강좌는 이런 자격증을 발급합니다 — 원본, 고유 코드, URL 검증 가능, 그리고 실제로 입증한 내용을 상세히 기재.
P
PickAClass
스킬 프로필 · 검증 가능
문서
숙달 인증서
다음을 증명합니다
이름 성
의 숙달을 성공적으로 입증했습니다
Kafka와 Spark를 활용한 실시간 데이터 레이크 기초
입증된 스킬
✓
행동 패턴 분석
기초
1.2 시간
✓
의사결정 아키텍처 프레임워크
숙련
1.4 시간
✓
A/B 테스트 설계
숙련
1.7 시간
✓
행동 심리학 카피라이팅
고급
1.9 시간
P
PickAClass — 이름 성
Kafka와 Spark를 활용한 실시간 데이터 레이크 기초
2/2 페이지
성과 상세
수강 내용 요약
완료한 레슨
14 / 14
연습 문제
26 / 28
제출 과제
4 (평균 4.5 / 5)
캡스톤 프로젝트
검토됨 — 4.6 / 5
총 연습
6.2 시간
성과 벤치마크
코호트 순위
1,625명 중 상위 12%
완료까지 시간
11일 (중앙값: 22)
숙달 점수
91 / 100
연습 문제 점수
94%
스킬 검증
검증된 스킬 경로
리뷰
아직 리뷰가 없습니다 — 첫 경험을 공유해 보세요.
다른 학습자도 수강
자주 묻는 질문
이 과정을 듣는 데 무엇이 필요한가요? +
인터넷이 되는 휴대폰이나 컴퓨터만 있으면 됩니다. 설치나 특별한 장비는 필요 없습니다.
결제는 어떻게 하나요? +
Stripe를 통한 카드로. 카드 정보는 저장하지 않으며 Stripe가 안전하게 처리합니다.
환불받을 수 있나요? +
네 — 14일 이내 전액 환불, 이유를 묻지 않습니다.
얼마나 오래 이용할 수 있나요? +
평생. 구매하면 과정은 당신의 것이며 언제든 다시 볼 수 있습니다.
수료증을 받을 수 있나요? +
네. 수료 시 LinkedIn 프로필에 추가할 수 있는 수료증을 받습니다.
이런 분야 학습자에게
테크
디자인
금융
마케팅
의료
교육
호스피탈리티
제조업
10
매달 10개 강좌 받기
멤버는 매달 원하는 강의 10개를 $0에 받습니다. 강의별 요금 없음 — 구독료만 내면 됩니다.
$349.99 / 월
- ✓ 매달 10개 강좌
- ✓ 언제든 해지 가능
매월 갱신됩니다. 사용하지 않은 강좌는 각 결제 월 말에 소멸됩니다.