데이터 엔지니어링


Online Course

클라우드를 활용한
데이터 파이프라인 구축

  • Only 패캠!
    데이터 파이프라인 구축 끝판왕

    데이터 수집, 저장, 처리, 분석, 시각화까지
    모든 단계의 파이프라인 구축

  • 강사님의 꼼꼼한 애프터 서비스


    프로그램 버전에 맞춰 강의도 리뉴얼 & 밀착케어를 위한 질의응답 게시판 운영

  • 20년 전문가의 현업 노하우


    실무와 유사한 환경에서 실습 & AWS 코스트 최적화 노하우까지!

  • 평생소장
  • 최저가
  • 데이터 엔지니어링
  • Spark
  • AWS

한번 구매로, 평생 소장하세요.
(자동 구성) 가격이 인상됩니다.

지금 최저가로 구매하세요!

  • 정상가 (자동 구성)
  • 할인 금액 (자동 구성)
  • 최종 금액 (자동 구성)
  • 12개월 할부 시 (자동 구성)
오늘이 최저가!
데이터 파이프라인

데이터를 효율적으로 관리, 운영하기 위해 필수적인 ‘데이터 파이프라인’ 구축.
효과적인 데이터 파이프라인 구축에는 고려해야 할 것들이 정말 많습니다.

데이터 파이프라인
데이터 파이프라인

채용시장에서도 데이터 엔지니어의 필수 역량데이터 파이프 라인 구축
혼자서 공부한다면, 정말 많은 시간과 노력이 소요됩니다.

현업 경력 20년의 베테랑 강사님과 함께 데이터 파이프라인 구축 실습을 진행하고,
실제 서비스 배포와 운영 노하우까지 배워보세요!

데이터 파이프라인 전체 과정 커버

⭐Only 패캠⭐ 빅데이터와 클라우드에 대한 이해부터 데이터 수집, 저장, 처리, 분석, 시각화까지 전부 알려드립니다.

AWS와 Spark를 포함한 다양한 툴 활용

데이터 수집부터 시각화까지 단계별로 필요한 툴을 함께 학습해 실무 활용도를 높여줍니다.

AWS 운영&코스트 최적화 노하우

성능과 서비스 퍼포먼스는 유지하되, 비용은 절감할 수 있는 AWS 운영/비용 최적화 방법을 공개합니다.

버전 업데이트가 반영된 강의

AWS 서비스 주요 업데이트에 맞춰 강의가 리뉴얼 되므로 최신 환경에서 학습할 수 있습니다.

실무와 가장 유사한 환경에서 실습

정제되지 않은 데이터로 구성/수집부터 가공까지 경험하므로 실제 시스템 에러에도 대응 가능합니다.

밀착케어를 위한 질의응답 게시판 운영

20년 경력 강사님이 나의 랜선 사수가 되어 수강 도중 궁금한 점에 대해 친절히 답변해드립니다.


데이터 파이프라인
데이터 파이프라인
데이터 파이프라인

데이터 파이프라인
데이터 파이프라인

본 강의는 빅데이터와 클라우드에 대한 이해부터 데이터 수집, 저장, 처리, 분석, 시각화까지 데이터 분석의 전체 과정에 걸친 데이터파이프라인 구축을 다룹니다. 실무에서는 이런 하나의 개별 영역 보다 일련의 데이터 분석 과정들을 적절한 툴로 연결하는 것이 중요합니다. 수강생들의 배경지식 차이를 고려하여 기본적인 개념에 대한 부분을 설명한 후 실습을 진행합니다.


데이터 파이프라인

수 많은 AWS 서비스 종류와 기능, 복잡한 비용 체계로 클라우드 관리의 어려움을 겪고 계신가요?

데이터 파이프라인

AWS는 레고 블록처럼 각각의 블록을 조합하여 하나의 서비스를 만드는 것인데,
이 블록들을 어떻게 조합하느냐에 따라 비용이 결정됩니다.

[ TCO를 고려한 강의 ]

데이터 파이프라인

TCO(Total Cost of Ownership ; 소프트웨어를 운영하는데 들어가는 비용)

예시를 보면, 코스트 최적화를 하기 이전에 1개월 기준 약 4,674불의 비용이, 코스트 최적화가 적용된 이후에는 약 1,168달러였습니다. 여기에 더해 24시간 운영이 필요한 기존 방식이 아닌, ON/OFF가 자유로워 운영 부담이 현저히 적은 하루 8시간 기준으로 잡는다면 고작 1개월에 292달러의 비용이 발생하게 됩니다. 따라서 수치 상으로 16배의 비용 절감이 가능한 것으로 볼 수 있습니다.


데이터 파이프라인

AWS는 전 세계의 다양한 사례들과 니즈들로 굉장히 빠르게 변화하고 다양한 제품 군들이 등장하며, 업데이트도 자주 반영됩니다. 하지만 본 과정은, 2년 동안 버전 업데이트가 있을 시에, 강사님께서 강의를 최신 버전으로 업데이트 해주실 예정입니다. 갑작스레 실무 환경이 바뀌더라도 본 강의를 구매한다면 새로운 환경에 적응할 수 있을 것 입니다.

(** AWS 서비스 업데이트에 한정; 해당 동영상 강좌 시청에 영향을 주는 메이저 업데이트에 한정, ~2023년 9월까지 업데이트 적용)


데이터 파이프라인
실습 1. Kafka install on EC2
실습 2. 데이터 수집 파이프라인 구축
실습 3. 데이터 전처리 분석 파이프라인 구축
실습 4. 데이터 시각화 파이프라인 구축

책은 항상 ‘잘 되는 경우’만 보여줍니다. 하지만 실무에서는 책에서 쓰여 있는 것과 같이 ‘이상적인’ 환경인 경우가 없습니다. 실제로 운영을 하다 보면 시스템이 멈추거나 하는 경우가 빈번히 발생합니다. 본 강의는 실제 데이터가 발생하는 환경을 만들어서 실무와 가장 유사한 상황에서 실습을 진행합니다. 또한 강의자료만 봐도 실무에서 바로 활용할 수 있을 정도로 상세하게 작성하고 있으니 수강생들께서 자료를 보고 쉽게 데이터 파이프라인을 구축하실 수 있을 것입니다!


데이터 파이프라인
데이터 파이프라인

수업 내용부터 실습까지 잘 모르는 내용이 있으면 질의응답 게시판에 자유롭게 질문하세요. 강사 활동부터 데이터표준화 컨설팅, 솔루션 개발의 기술자문 외에도 여러 기업의 데이터 분석팀 책임자로서 지금까지 20년째 꾸준히 활동하고 있는 데이터 아키텍트인 강사님께서 직접 답변해드립니다!

(** 교육 내용 범주 안에서 질의응답, ~2023년 9월까지 적용)

강사님께 직접 물었습니다.

권낙주
직장 이력
현) 금융권 클라우드 빅데이터 아키텍쳐 전문가
전) SK C&C Acculnsight Public Cloud 아키텍트 책임자
전) 직방 데이터분석팀 데이터 아키텍트 책임자 금융권 데이터표준화 컨설팅
솔루션 개발 기술자문 10년 경력

강의 경력
패스트캠퍼스 데이터 파이프라인 구축 오프라인 캠프 1-5기 강사
인덕대학교 겸임교수

Question 1.

어떤 분들이 수강하시면 좋을까요?
1, 데이터 엔지니어링에 관심있으신 분
2. 빅데이터 시스템을 온프레미스에서 클라우드 전환하고자 하는 회사 데이터 엔지니어
3. 빅데이터 엔지니어 취업준비 or 빅데이터 엔지니어 전향하고자 하는 엔지니어

* 본 코스는 Spark 사용 방법을 알고 있는 분, 잘 모르시는 분 모두 수강가능합니다! (스크립트 진행)
* EC2 배포도 포함되어있으며, AWS 서비스를 써본 분들에겐 더욱 접근하기 좋은 강의입니다!

Question 2.

책이나 기존 인강과는 어떤 점이 다른가요?
책은 항상 ‘잘 되는 경우’만 보여줍니다. 하지만 실무에서는 책에서 쓰여 있는 것과 같이 ‘이상적인’ 환경인 경우가 없습니다. 회사에 따라 사용해야 하는 기술 스택이 전부 제각각이기 때문이죠. 이런 경우를 대비해 운영하고 있는 시스템에 대한 모니터링 방안에 대해 고민해야 하는데, 이것은 책에서는 얻을 수 없는 부분이에요. 이 강의는 실제 데이터가 발생하는 환경을 만들어서 실무와 가장 유사한 상황에서 실습을 진행할 예정입니다. 잘 준비된 강의자료와 함께 실무에서 요긴하게 사용할 수 있는 트러블 슈팅 방법들을 알려드릴 텐데요. 수업을 듣고 나면 바로 실무에서 데이터 파이프라인을 구축할 수 있으실 겁니다.

Question 3.

중점을 둔 수업방식/실습이 있으신가요?
본 강의는 AWS와 Apache Spark를 활용하여 직접 데이터 파이프라인을 구축하는 실습형 강의로, AWS와 Spark가 갖고 있는 다양한 기능들을 어떻게 조합해야 하는지에 대한 감을 잡을 수 있습니다. 미니프로젝트를 통해 데이터를 분석할 Target을 선정하고, 데이터 수집부터 데이터 저장, 전처리, 분석과 시각화까지 모두 배울 수 있으며, 이를 실제 서비스에 바로 적용할 수 있습니다. 또한 AWS 상에서 쉽게 따라서 할 수 있도록 git을 통한 스크립트와 소스코드를 제공해드립니다.

커리큘럼.

패스트캠퍼스 데이터 파이프라인 구축 오프라인 캠프 1-5기를 성공적으로 이끈
총 20년 경력 데이터 아키텍쳐 전문가 권낙주 강사님이 꼼꼼하게 설계한 커리큘럼을 살펴보세요!
지금 한 번만 결제하고 모든 강의를 평생 온라인에서 만나보실 수 있습니다!

Part 01. 데이터 수집 파이프라인 구축

Part 02. 데이터 분석 파이프라인 구축

Part 03. 데이터 분석 및 시각화 파이프라인 구축

  • 상세 커리큘럼.

    자세한 커리큘럼 및 내용은 여기서 확인하세요!

👇9월 23일 수강료 인상까지 얼마 안남았어요👇
0 0시간 0 0 2021-09-22T23:59
  • 평생소장
  • 최저가

한번 구매로, 평생 소장하세요.
(자동 구성) 가격이 인상됩니다.

9월 23일 부터 가격이 인상됩니다.
지금 최저가로 구매하세요!

  • 정상가 (자동 구성)
  • 할인 금액 (자동 구성)
  • 최종 금액 (자동 구성)
  • 12개월 할부 시 (자동 구성)
오늘이 최저가!
(자동) (자동) (자동)
정가 (자동)
현재 판매가 (자동)
12개월 무이자 할부 시 (자동)
해당 강의는 예약 구매 상품입니다.

영상 공개는 다음과 같이 3회에 걸쳐 공개됩니다.
(1회 구매 이후 모든 영상을 평생 소장가능합니다.)

-----

1차 공개 : 21년 10월 27일 (수)
2차 공개 : 21년 11월 29일 (월)
전체 공개 : 21년 12월 27일 (월)


이 강의도 추천해요.
데이터 파이프라인

수강료.

  • 클라우드를 활용한 데이터 파이프라인 구축 Online.

    현재 정가 대비 66% 할인 중!
    9월 22일 수요일 자정 까지

    정가 1,200,000원
    현재 판매가 399,000원

    12개월 무이자 할부 시 월 33,250원

국내 9개 카드사 12개월 무이자 할부 지원! (간편 결제 제외)

  • 삼성카드
  • 신한카드
  • 롯데카드
  • 현대카드
  • 하나카드
  • BC카드
  • KB국민은행
  • 씨티카드
  • NH농협카드