[시각화] 스크래핑을 통한 시각화
·
크롤링, 스크래핑, 시각화/시각화
앞서 포스팅한  Selenium을 통한 스크래핑 후, 그 데이터를 Seaborn을 통해 시각화를 해보려고 합니다! 요즘 일교차가 엄청난만큼, 기상청의 날씨 데이터를 스크래핑하여 진행해보도록 하겠습니다! 코드# 스크래핑에 필요한 라이브러리 import!from selenium import webdriverfrom selenium.webdriver import ActionChainsfrom webdriver_manager.chrome import ChromeDriverManagerfrom selenium.webdriver.common.actions.action_builder import ActionBuilderfrom selenium.webdriver import Keys, ActionChainsfrom s..
[데이터 시각화] Seaborn
·
크롤링, 스크래핑, 시각화/시각화
이전에 스크래핑한 데이터를 시각화하기에 앞서, 기초적인 시각화는 어떻게 하는 지에 대해 알아보도록 하겠습니다!이번에 알아볼 내용은 시각화 라이브러리 중 'Seaborn'이라는 라이브러리에 대해서 알아보도록 하겠습니다!Seaborn?seaborn은 데이터 시각화 라이브러리입니다.통계적 데이터를 시각화 하는 데에 사용되며, Matplotlib 위에 구축되어 있기에, Matplotlib를 통한 커스터마이징이 가능합니다!설치%pip install seaborn실습# Seaborn 라이브러리 importimport seaborn as sns# 꺽은선 그래프 - lineplot 그리기!sns.lineplot(x=[1, 3, 2, 4], y=[10, 20, 5, 1])# 막대 그래프 - barplot 그리기!sns...
[데이터 엔지니어링 데브코스 4기] 3주차 10/2 TIL
·
데이터 엔지니어링 데브코스
오늘은 웹 크롤링, 웹 스크래핑에 대한 교육에 앞서, 그에 대한 이론과 실습을 진행하였습니다!! 예전에.. 아주 먼 옛날.. 셀레니움으로 크롤링을 한 번 해본 경험이 있던 것 같긴한데... 까마득해요.. 또 데이터 관리 인턴 시절.. 인턴 동기끼리 크롤링? 스크래핑? 을 통해 여러 간단한 프로그램도 만들어봤는데, 사실상 백지 상태인거같아요 ㅋㅋㅋㅋ 오늘 배운 내용은 실습 및 개념 위주라 개념과 BeautilfulSoup를 어떻게 사용하는 지 간단하게 코드를 정리해보았습니다!개념 및 정리Web : 인터넷에서 정보를 교환할 수 있는 하나의 플랫폼!웹 페이지는 HTML 형식으로 되어있고, 웹 브라우저는 클라이언트가 HTTP 요청을 보낸 후, 응답받은 HTML 코드를 랜더링 해준다!웹 크롤링 vs 웹 스크래핑웹..