멀티캠퍼스

통합검색

검색도우미 기능을 다시 켤때는
검색창에서 검색도우미 열기를 클릭하세요

과정상세

원샷! 파이썬을 활용한 웹 크롤링과 데이터 분석

thumbnail image
집합

교재제공 중급

원샷! 파이썬을 활용한 웹 크롤링과 데이터 분석

4.8

like 242

1,300,000원 (VAT없음)
학습기간
개폐강 확정일 2025.07.04

카테고리

  • 학습유형별 대면
  • 데이터 사이언스 데이터 분석

과정요약

과정요약
학습시간 09:00 ~ 17:00 ( 34시간 ) 난이도 중급
교육비 지원 고용보험 비환급 평가항목 출석률 100%
수료기준 총점 80점 이상시 수료 정원 20 명
교재정보
강사명 표선영

과정소개



※ 본 교육을 위해 사용될 PC 사양은 아래의 내용으로 권장드립니다.
- CPU: i5 이상
- 메모리: 8GB 이상
- 운영체제: 윈도우즈 10

 


※ (필수) 교육 전 준비
- 크롬 브라우저 설치(교육 중 사용)


※ (필수) 사이트 접속 여부

** 크롤링 대상 사이트 **
http://konanacademy.github.io/da
https://www1.president.go.kr/petitions/
http://www.hanbit.co.kr/store/books/full_book_list.html
https://finance.naver.com/marketindex/
http://www.weather.go.kr/weather/forecast/mid-term-rss3.jsp
http://jolse.com/category/tonermist/1019/
https://news.naver.com/
http://www.python.org
http://tour.interpark.com/

학습목표

  • 웹크롤링으로 데이터를 수집하고, 전처리, 분석, 시각화의 프로세스를 파이썬의 다양한 라이브러리를 활용하여 처리할 수 있다.
  • 다양한 웹사이트와 공공데이터 포탈에서 제공되는 데이터 중에서 필요한 데이터를 쉽게 크롤링 할 수 있다.
  • 단순 반복 업무를 자동화 프로그램으로 만듦으로써 효율적인 업무처리를 할 수 있다.

학습대상

  • 파이썬의 기초가 있으나 활용경험이 부족한 사용자
  • 파이썬 사용/교육 경험은 없으나 다른 웹프로그래밍 사용경험이 많은 사용자
  • 개발자, 운영자, 분석 및 설계자
  • 데이터 수집, 전처리, 분석, 시각화를 한 번에 배우고 싶은 학습자
  • 고객정보나 마케팅 정보를 수집 및 분석하시는 분
  • 금융 데이터나 기업 정보, 지리 정보등 다양한 데이터들을 수집 및 분석하시는 분
  • 데이터 수집의 방법으로 웹사이트에서 원하는 데이터를 추출하거나, 정부 공공 데이터를 사용하거나, Open API를 활용하는 등 필요에 따라 데이터를 수집하고 싶은 학습자
    • 1일차
      • Chpater 1.
        • 스크래핑과 크롤링 소개 09:00 ~ 10:00
      • .
        • HTTP 프로토콜 특징/크롤러와 로봇 배제 표준 10:00 ~ 11:00
      • .
        • 실습 환경 구축/아나콘다와 주피터 노트북/파이참(Pycharm) 11:00 ~ 12:00
      • .
        • web 기초,HTML 주요 태그 정리 13:00 ~ 14:00
      • .
        • HTML 주요 태그 정리, CSS, Javascript 14:00 ~ 15:00
      • .
        • 문자열 인덱싱과 슬라이싱/리스트, 딕셔너리, 세트, 튜플 15:00 ~ 16:00
      • .
        • 함수와 for 컴프리헨션 16:00 ~ 17:00
    • 2일차
      • Chpater 2.
        • 라이브러리 사용/urllib - 웹 페이지 추출 09:00 ~ 10:00
      • .
        • requests - 스크래핑 10:00 ~ 11:00
      • .
        • requests - 스크래핑/lxml - 스크래핑 11:00 ~ 12:00
      • .
        • MongoDB 구조 이해 및 설정 13:00 ~ 14:00
      • .
        • 스크래핑한 데이터를 MongoDB 에 저장 14:00 ~ 15:00
      • .
        • 스크래핑과 크롤링 - BeautifulSoup 15:00 ~ 17:00
    • 3일차
      • Chpater 3.
        • 스크래핑과 크롤링 - BeautifulSoup 09:00 ~ 10:00
      • .
        • Selenium, WebDriver를 사용한 크롤링 10:00 ~ 11:00
      • .
        • Selenium, WebDriver를 사용한 크롤링/chrome 브라우저 11:00 ~ 12:00
      • .
        • Selenium, WebDriver를 사용한 크롤링/PhantomJS 브라우저 13:00 ~ 14:00
      • .
        • 크롤러 만들기 14:00 ~ 16:00
      • .
        • 수집한 데이터 분석 16:00 ~ 17:00
    • 4일차
      • Chpater 4.
        • 수집한 데이터 분석 09:00 ~ 10:00
      • .
        • 수집한 데이터 파일로 저장하기와 읽기, 여러 파일 내용 취합 10:00 ~ 11:00
      • .
        • 파일 그룹별 통계 11:00 ~ 12:00
      • .
        • 수집한 데이터 그래프로 시각화 13:00 ~ 14:00
      • .
        • 공공데이터 분석 14:00 ~ 15:00
      • .
        • 공공데이터 분석과 시각화 15:00 ~ 17:00
    • 5일차
      • Chpater 5.
        • OpenAPI 와 OAuth 인증 이해 09:00 ~ 10:00
      • .
        • OpenAPI 로 제공되는 공공데이터 수집 10:00 ~ 11:00
      • .
        • OpenAPI 로 제공되는 공공데이터 분석 11:00 ~ 12:00
      • .
        • OAuth 인증으로 OpenAPI 사용 13:00 ~ 14:00
      • .
        • 수집한 데이터 MongoDB 에 저장 14:00 ~ 15:00
      • .
        • 과정 리뷰 및 과정 정리 15:00 ~ 16:00

수강후기 242

평균평점

4.8 / 5.0

  • 5
    두*민

    2025.06.13

    더 심화과정도 듣고싶다
  • 5
    김*아

    2025.06.13

    지루하지 않게 잘 배웠습니다
  • 5
    박*연

    2025.06.13

    강사님이 모든 내용을 쉽게 설명해주셨습니다 이해도 잘 되고 입문자도 실습을 무리없이 따라할 수 있었습니다
  • 4
    지*진

    2025.06.13

    쉽고 재밌게 알려주셔서 잘배웠습니다
  • 4.25
    오*현

    2025.06.13

    재밋게 따라하면서 할 수 있었습니다. 특히 퀴즈를 중간중간 주셔서 단순히 보고 따라하는게 아니라 직접 해결해가는 부분이 좋았고, 나름 다른 수강생들과 경쟁도 하는 느낌도 좋았습니다.

원샷! 파이썬을 활용한 웹 크롤링과 데이터 분석 관련과정