파이썬으로 해보는 Spark 프로그래밍 with 프로그래머스

파이썬으로 해보는 Spark 프로그래밍
with 프로그래머스

Spark 프로그래밍 공부를 시작했다 실패한 경험이 있나요?
실패없이 완강할 수 있게 프로그래머스가 준비했어요!
Spark 공부의 즐거움과 자신감을 불어 넣어 드릴게요.

프로그래머스와 함께
동료와 함께

영상 강의 혼자 듣기 지루하죠?
이제 함께 공부하는 동료와 소통하며 들으세요!

모르는 것이 있다면
언제든지 질문을 올릴 수 있는
질문&답변 게시판
함께 공부하는 동료와
소통할 수 있는
클래스톡
동료들끼리 서로 코드를 보며
피드백 할 수 있는
코드 리뷰 갤러리

강사님의 코드 리뷰는 필수로 제공되지 않습니다. 코드 리뷰가 필요한 경우 라이브 강의를 추천합니다.

주니어 & 시니어 데이터 엔지니어를 위한 Spark 활용 강의

“ 분산 처리 시스템인 Spark 프레임워크의 기본 개념을 이해하여
실무에서 사용할 수 있습니다. ”
“ Spark 클러스터와 Spark Job을 최적화하는
중급 활용까지를 목표로 합니다 ”

누구나 들을 수 있나요?

현업 데이터 엔지니어를 위한 초,중급 강의입니다.
선수 학습이 필요하다면 하단의 강의를 참고해 주세요.

주니어 또는 시니어 데이터 엔지니어
데이터 엔지니어링에 관심이 있는 개발자

선수학습이 필요한가요? SQL 기본 문법에 대한 정리는 <쉬운 SQL 프로그래머스 문제 함께풀기>를, Python 기본 문법에 대한 정리는 <파이썬 입문 with 프로그래머스>를 추천합니다.

파이썬으로 해보는 Spark 프로그래밍은

Point 1.
Spark를 사용한
빅데이터 처리에
대한 이해
Point 2.
Spark SQL 실습을 통한 구조화된 데이터를 효율적으로 다루는 방법 학습
Point 3.
Spark 내부동작 이해 및 클라우드 데모, Spark ML을 활용한 머신러닝 모델 빌딩

이 모든 걸, 배워요!

상세한 강의 목록은 하단에서 확인 할 수 있어요.

STEP 1 빅데이터 처리와 Spark 소개
STEP 2 Spark 프로그래밍: DataFrame
STEP 3 Spark 프로그래밍: SQL
STEP 4 Spark 내부 동작
STEP 5 Spark ML
STEP 6 Spark 클라우드

상세 커리큘럼 보기

강사님 소개

한기용(Max)

현) Grepp USA (그렙) / CTO

데이터 관련 컨설팅 (SK Telecom, ChartMetric, TeamBlind, SkipScooter, Airvet 등)
Udemy(유데미) / Senior Director of Data and Principal Data Architect
Yahoo!(야후) / Director of Engineering

데이터 관련 일을 하다 보면 처음에는 판다스와 같은 라이브러리를 이용해 데이터 처리를 하다가 회사가 성장하고 데이터의 활용이 늘어나고 데이터 크기가 커지면서 다른 툴과 기술의 사용이 필요해집니다. 흔히 이야기하는 빅데이터 처리기술이 필요해지는데, 그전에는 하둡이 대표적인 빅데이터 기술이었다면 이제는 Spark이 그 자리를 대신하고 있습니다.

Spark은 판다스를 레퍼런스로 만들어졌고 SQL을 지원하기 때문에 상대적으로 배우기가 쉬운 사실상 표준 빅데이터 처리 기술 입니다. 이번 강의에서는 파이썬 프로그래밍과 SQL 기본을 아는 개발자를 대상으로 PySpark기반 Spark 프로그래밍을 소개하고 다양한 실습을 진행해 보도록 하겠습니다.

Spark 강의를 바탕으로 여러분을 빅데이터 처리 세상으로 안내해 주는 길잡이가 되리라 믿습니다.