파이썬 크롤링 활용한
웹 데이터 수집 및 실전 스킬

- YouTube, 스토어, 연령별 트랜드 데이터

 
데이터 분석 입문 수강생이 선정한 가장 유용한 도구!
 지금 바로 업무에 활용 가능한 고객 데이터와 활용 팁

 

데이터 분석을 하려는데 데이터가 없다면, 어떻게 하실건가요? 인플루언서 댓글, 제품 및 서비스에 대한 반응 등 실제 여러분이 마켓 트랜드를 파악하고 소비자 반응을 알기위해 필요한 데이터는 웹에서 실시간으로 생성되고 있습니다. 이렇게 유용하고 방대한 데이터를 수작업으로 하나 하나 수집하긴 어렵죠. 단 몇 줄의 파이썬 크롤링 코드만 작성할 수 있다면, 일주일이상 걸릴 데이터 수집 프로세스를 빠르고 쉽게 끝낼 수 있습니다. 여러분이 원하는 어떤 웹사이트에서도 데이터를 수집할 수 있는 역량을 갖출 수 있습니다.

파이썬 경험이 전혀 없으신가요?
오프라인 기초문법 특강(3시간) 제공

본 강의 수강생에 한하여 파이썬 기초 문법을 학습할 수 있는
오프라인 특강(3시간)을 제공합니다.
※특강 신청은 카카오톡으로 문의 부탁드립니다.

일    정11.16 ~ 12.14 | 5회
매주 토요일 14:30 ~ 17:30 | 일 3시간
총 15시간 강의
정    원15명
준비물노트북
가    격65만 원50만 원
장    소러닝스푼즈 강의장
강남대로94길 15, S2빌딩 4층

*강남역 11번 출구 3분 거리 (지도확인)

데이터 수집, 크롤링 기법을 배워야 하는 이유?

파이썬 크롤링 강의특징1

여러분이 가진
데이터만으로,
해결 가능하셨나요?

"데이터 분석, 내가 가지고 있는 데이터만으로 하실건가요?"

여러분이 지금 분석할 데이터는 한 눈에봐도 알 수 있을 정도로 적거나, 이미 대략적인 내용은 파악하고 있는 데이터일 수 있습니다. 우리가 데이터 분석을 하는 것은 데이터를 들여다보기 전까지는 알 수 없었던 소비 트렌드, 제품 리뷰, 서비스 후기 등 웹상에 실시간으로 작성되고 있는 진짜 데이터에서 고객의 니즈를 파악하기 위함이죠. 이를위해 우리가 본 과정에서 다루는 것이 바로 데이터 수집을 위한 파이썬 크롤링 입니다.

파이썬 크롤링 강의특징2

좋은 기법도,
효과적으로
활용해야 합니다.

"크롤링, 어떻게 하면 자유자재로 활용할 수 있을까요?"

크롤링이 무엇인지 알고 계신다면, 한번쯤은 어떻게 하면 효과적으로 활용할 수 있는지 고민해보셨을 거에요. "크롤링을 합법적으로 이용해야 한다고 하던데.." "한번에 하나씩이 아니라, 대량으로 빠르게 데이터를 수집하고 싶은데.." "게시판 형태, 검색 형태 등 모양이 달라도 데이터를 가져오고 싶어요!" 등 실무에서 파이썬 크롤링 방법을 활용하는 순간, 맞닥드릴 상황을 해결할 테크닉을 모르는 분들이 많습니다.

파이썬 크롤링 강의특징3

가장 만족도
높았던 스킬
크롤링

"확실한 커리큘럼과 수강 후기로 강의력이 검증된 전문가에게 배우는 크롤링"

바로! 지금! 여러분 눈앞에 있는 어떠한 웹 사이트에서도 원하는 데이터를 가져올 수 있도록 배우는 강의 입니다. 파이썬 크롤링 기법을 처음 접해존 초심자도, 간단한 크롤링 기법을 다룰 수 있는 분도 지금 고민하는 내용을 말끔히 해결해 드립니다. [파이썬으로 시작하는 데이터 분석 입문] 강의에서 가장 만족도가 높았던 세션인 파이썬 크롤링 기본부터 심화까지 한 번에 알려드립니다.

“데이터 분석은 가설을 세웠다면,
분석에 필요한 데이터를 준비하셔야 합니다."

구글은 광고 효율을 개선하기 위해 쿠키 데이터를 모으듯이, 우리가 세운 가설을 확인하기 위해서는 데이터가 필요합니다. 여러분이 필요한 데이터가 항상 준비되어 있지 않은 경우가 훨씬 많습니다.

강의특징

크롤링 초심자도
이해할 수 있는 커리큘럼

1-2주에 걸쳐 크롤링이 무엇인지, 크롤링을 활용하기 위해 꼭 필요한 WEB/HTML은 무엇이 있는지 배우게 됩니다. 그리고 다양한 상황에서 데이터들을 수집하고, 실습을 통해 반복 연습할 수 있도록 강의를 진행합니다.

데이터 수집을 위한,
기본기부터 실전 Tip 까지!

크롤링 기본적인 사용 방법만 알려드리는 강의가 아닙니다. 배우신 크롤링을 활용하다 보면 다양한 웹사이트에서 이슈를 발견하게 됩니다. 실제 접할 수 있는 에러 상황에 대응할 수 있는 팁도 함께 알려드립니다.

수강생이 뽑은
가장 도움된 테크닉

[파이썬으로 시작하는 데이터 분석 입문] 강의의 기수강생이 뽑은 가장 유용한 스킬인 '크롤링' 기법을 자세히 다루며, 실전 팁도 함께 배우면서 상황별 대응 능력을 체계적으로 배우세요. 모든 실습은 실제 활용도가 높은 예제들로 진행합니다.

"파이썬 크롤링, 잘 따라갈 수 있을까요?"

마케팅/영업/기획 등 실무 경험과 검증된 강의력을 가진 데이터 분석가가 꼭 필요한 내용만, 쉽게 익히실 수 있도록 도와드립니다.
파이썬 크롤링 스킬을 처음 접하시는 분들도 충분히 이해가 가능하시도록 해드릴 예정입니다!

실습예시

수업에서 YouTube , Naver , 스토어 등 트렌드 데이터 직접 가져오는 실습을 합니다.

파이썬 크롤링 실습자료
파이썬 크롤링 실습자료

수강효과

필요한 데이터는
무엇이든 수집하는 역량

소비자 반응을 보기 위한 댓글/후기 등의 텍스트, 가격 분석을 위한 숫자 데이터 등 여러분이 원하는 정보를 얻기 위해서는 다양한 형태의 데이터를 수집할 수 있어야 합니다. 여러분이 필요한 어떠한 형태의 데이터도 수집할 수 있는 역량을 갖출 수 있습니다.

본인만의 크롤링
코드 구현

모든 실습은 데이터 유형별/상황별로 구분하여 진해할 수 있도록 구성되었습니다. 앞으로 어떤 데이터/어떤 웹사이트에서 데이터를 수집하더라도 수업 시간에 작성했던 코드를 기반으로 작성한다면 손쉽게 데이터 수집 코드를 만들어낼 수 있습니다. 실무에 바로 활용해보세요.

어떤 상황에서도
가능한 실전 크롤링 스킬셋

크롤링을 실제로 적용해보면 다양한 에러를 만날 수 있습니다. 웹 서비스마다 데이터를 보여주는 방법이 다르기 때문입니다. 그래서 상황별 크롤링 방법을 터득하는 것이 필요합니다. 본 강의를 통해 실전에 바로 활용가능한 스킬셋으로 어떤 상황에서도 스스로 대처할 수 있게 됩니다.

수강대상

네이버/유투브 댓글 자동으로 수집하고 싶어요

마케팅 타겟 설정을 위한 시장 데이터를 얻고 싶어요.

전세계 실시간 정보 리포트 만들고 싶어요.

온라인 데이터 복사/붙여넣기 수작업 힘들어요

크롤링 상황별 노하우를 알고 싶은 분

서비스/제품에 대한 실시간 소비자 반응 알고 싶은 분

크롤링은 다양한 웹 데이터를 수집하는 방법으로
크롤링에 대한기본적인 이해, 상황별로 적절한 방법을 사용할 수 있는 역량이 필요합니다!

강의사진

커리큘럼

* 회차별 주제를 클릭하면 상세한 커리큘럼이 나옵니다.

1주차. WEB/HTML이해 및 HTML에서 정보 추출하기

첫 번째 강의에서는 5주간 진행될 크롤링이 무엇인지, 어떤 것을 할 수 있고 어떻게 동작하는 지에 대해 살펴볼 것입니다. 크롤링을 빠르고, 안전하게 잘 하기 위해서는 웹의 구성과 HTML 에 대해 어느정도 이해를 하는 것이 좋습니다. 웹과 HTML은 책 1권으로도 안될 정도로 범위가 넓으나, 본 과정에서는 크롤링을 진행할 때 도움이 될만한 핵심 부분만 선택하여 알아볼 것입니다.

이어서 웹페이지에 접속 후 HTML 정보를 다운 받는 방법, 그리고 BeautifulSoup 라이브러리를 이용하여 HTML에서 내가 원하는 정보를 추출하는 방법을 알아볼 것입니다. 활용법에 대해 알아볼 것입니다.

 

이론 및 실습

  • WEB / HTML 구성
  • BeautifulSoup 으로 HTML 내용 가져오기
  • 네이버 연령별 급상승 검색어 크롤링

2주차. 크롤링 기법 선택하기

3주차. 대량 & 고속 크롤링 하기

4주차. 유투브 영상 정보 및 댓글 수집하기

5주차. 상품 정보 및 이미지 수집하기

강사소개 및 인터뷰

데이터 분석

장남수

(현) 인사이저 텍스트분석 총괄
(전) 아모레퍼시픽
- 제품 수요예측
- 재고 및 공급 망 관리
- 데이터분석 프로젝트 진행

- 성향분석기반 추천 서비스 기술자문
- SNS 분석을 통한 예측 시스템 기술자문
- 데이터분석 컨설팅 및 기술자문
- 크롤링 전문 회사 기술자문
- POSTECH 산업경영공학과

1. 자기소개 부탁드립니다.

안녕하세요. 인사이저에서 텍스트 분석 총괄을 맡고 있는 장남수 입니다. 인사이저는 매일 2만건 이상의 전세계 뉴스를 수집하고 중요 정보를 추출해 알고리즘에 반영하는 인공지능 펀드를 운영하고 있습니다. 이전에는 뷰티&소비재 회사에서는 약 9년간 SCM/마케팅/영업/기획 등 다양한 현업 업무 경험을 쌓았으며, 다양한 기술 자문 및 데이터 수집 및 분석 업무를 진행해왔습니다. 다양한 실무 경험을 해봤기에, 현재 현업 실무자들이 가지는 고민을 같은 눈높이에서 이해할 수 있으며 현재 필요한 것이 무엇인지 누구보다 잘 알고 있다고 자신합니다. 걱정되거나 고민하시는 부분이 있다면 언제든 말씀해주세요.

 

2. 강의에서는 주로 어떤 내용을 다룰 예정이시고, 어떤 형태로 진행되나요?

실제 크롤링을 업무 혹은 개인적인 목적으로 활용하시기 위해서 필요한 부분들을 알려드릴 예정입니다. 제가 수년간 크롤링 업무를 진행해오며 느꼈던 중요한 팁들만 선정하였습니다. 짧은 시간 동안 수개월 혹은 수 년간의 크롤링 실전 스킬셋을 쌓고 싶은 분들께 추천드립니다.

크롤링을 배울 때 가장 많이 어려워하는 부분은 웹서비스 마다 다양한 접근이 필요하다는 점인 것 같습니다. 특정 정보를 수집할 때 어떠한 기법을 사용해야 하는지, 왜 그렇게 해야하는지 이유를 알지 못한다면 운 좋게 크롤링을 성공한다고 하더라도, 자신있게 할 수 있다고 이야기하기는 어렵습니다. 크롤링 기법별 장단점과 어떨때 사용해야 하는지를 이해하고, 최적의 기법을 선택할 수 있는 방법을 찾을 수 있도록 알려드리겠습니다.

강의는 강사가 입력해놓은 코드를 단순하게 실행하는 것이 아닌 직접 코드를 타이핑하며 에러도 살펴보고 코드를 비교해보고, 수정도 해보며 실전과 가깝게 실습 위주로 진행을 할 예정입니다. 실습 예제는 크롤링 유형별로 분류하고, 각 유형에서 가장 흥미있을 주제들로 선정하였습니다. 해당 주제들을 재밌게 실습해보며 크롤링에 재미를 느낄 수 있을 것입니다. 또한 각 실습 사이사이에 클로링 주요 Tip 들을 함께 전달드려 다른 상황에서도 쉽게 적용이 가능할 수 있도록 할 것입니다.

 

3. 본 강의에서 배운 내용을 수강생 분들이 어떻게 활용할 수 있을까요?

웹에 있는 정보 중 내가 원하는 것은 무엇이든 수집해서 정리할 수 있게 될 것입니다. 이제는 내부 데이터만으로 모든 것을 해결할 수 있는 거의 없거나 한정적일 수밖에 없습니다. 모든 것이 외부의 환경/시장/경쟁사 등을 분석하는 것이 병행되어야 최적의 전략을 수립할 수 있게 됩니다. 웹 크롤링은 시장 조사, 경쟁사/제품 분석, 데이터 분석 프로젝트 진행 등 활용도가 무궁무진합니다. 크롤링을 알기 전과, 알고 난 후는 비교할 수 없을 정도로 많이 다릅니다. 직접 해보지 않으면 이해하기 어려우실 거에요. 꼭 직접 느껴보시면 좋겠습니다.

 

4. 다른 강의와 어떤 차별 점이 있나요?

강의는 실습을 중심으로 진행됩니다. 강사가 전달한 코드를 보면서, 실행만을 하면서 진행하는 강의는 참 쉽습니다. 에러도 나오지 않고, 실행 결과만을 보다보면 다 이해한 것 같습니다. 하지만 지나고 나면 모두 잊혀지고, 실제로 적용하기는 매우 어렵습니다. 본 강의는 수강생도 저도 직접 한줄 한줄 작성하며 진행할 것입니다. 개념적 이해가 필요한 부분에는 설명을, 실습이 필요한 부분에는 직접 입력을 하며 에러도 많이 보고, 질문도 많이 하게 될 것입니다. 에러들을 보면서 많이 답답하기도 하겠지만, 이 에러들을 회사나 집에서 혼자 접하시게 될 때는 몇 시간, 몇 일이 걸릴지 알 수 없습니다. 강의 종료 후에, 크롤링을 할 수 있을 것만 같다고 생각하는 강의가 아닌 실제 크롤링을 '할 수 있는'강의가 될 것입니다. 저는 개발자가 아닙니다. 외계어(?)에 가까운 어려운 용어를 사용하지 않고, 쉽게 설명할 수 있습니다. 무엇을 어려워 하시는지, 어떤 것이 필요한지 이해하며 이를 바탕으로 필요한 내용만을 쉽게 설명해드리는 강의가 될 것입니다.

 

5. 마지막으로 수강생들에게 하고 싶으신 말

제가 가장 처음 파이썬을 접하게 된 계기도, 퇴근 후 새벽까지 즐겁게, 때로는 힘들게 씨름하며 공부했던 것도 크롤링이였습니다. 데이터분석입문 강의나 다른 스터디/세미나에서도 ‘ 실제 업무에 가장 많이 활용 할 수 있는 건 파이썬 크롤링 ’이다 라는 평가가 많았습니다.

인터넷에서 자료를 찾을 수 있는 것과, 이를 정리해서 저장한 뒤 활용할 수 있는 것은 매우 큰 차이가 있습니다. 외주 요청으로 수십에서 수백만원의 비용으로 크롤링을 의뢰하셔도 그때 그때 내가 필요한 정보에 맞춰 데이터를 받는 것은 쉽지 않습니다. 내가 필요한 정보를, 내가 원하는 시점에 맞춰서 ‘편하게’ 수집할 수 있다면 업무 효율은 상상이상으로 올라갈 것입니다.

쉽고 단순하지만 손이 많이 가는 업무들은 컴퓨터에게 맡기시고, 조금 더 중요하고 부가가치 높은 업무에 집중하시는 건 어떠실까요?

 

수강료 65만 원50만 원
 
수강신청은 결제 순으로 선착순 마감될 수 있습니다.
개강 후 환불은 학원법 시행령 <제18조 제3항> 수강료 반환기준에 의거합니다.
 
*환불 세부규정 확인하기 (클릭)

15만 원 할인, 놓치지 마세요!

▼ 파이썬이 처음이신가요? ▼

지금 놓치시면
2달을 기다리셔야 합니다.
놓치시면 2달을
기다리셔야 합니다.