[ICT이노베이션스퀘어] 데이터 분석 중급 과정

 

'ICT이노베이션스퀘어'에서 주관하는 데이터 분석 중급 교육 과정에 참여했다. 파이썬 기초부터 머신러닝, 딥러닝까지 데이터 분석과 관련된 광범위한 기술을 많이 얻을 수 있었다. 이론과 함께 다양한 실습 문제를 다룰 수 있었던 점이 가장 좋았던 것 같다. 교육 내용 중 데이터 분석 실습, 웹크롤링이 가장 기억이 남았다.

 

1. 데이터 분석

데이터 분석은 기술통계, 탐색적 데이터 분석, 가설검정 등을 통해 통찰을 제공하는 것을 말한다.

'코로나 데이터 분석', '지하철 승하차 인원 분석' 등 다양한 주제의 데이터 분석을 실습해 볼 수 있었다.

데이터 불러오기, 데이터 전처리, 데이터 시각화 순으로 데이터 분석의 과정에 따라 직접 해볼 수 있는 실습 과정을 통해

어떻게 데이터 분석이 이루어져야 하는지 제대로 파악할 수 있는 기회가 되었다.

 

2. 웹크롤링

크롤링이란 웹 페이지에서 필요한 데이터를 추출해내는 작업이다.

크롤러란 수많은 웹 사이트를 탐험하여 페이지내 정보를 수집하는 시스템이다.

웹크롤링을 배우기에 앞서 HTML의 여러 태그들을 배웠다.

웹크롤링에 필요한 requests, BeautifulSoup4, selenium에 대해 배웠다.