[데이터 엔지니어링 데브코스 4기] 8주차 11/6 TIL
·
데이터 엔지니어링 데브코스
안녕하세요!! 프로젝트를 끝내고 돌아온 김줘입니다!! 프로그래머스 데이터 엔지니어링 데브코스 4기의 두번째 프로젝트가 오늘로 마무리 되었습니다! 팀원들 서로에게 배우고, 다양한 정보를 공유하면서 진행해서, 짧은 기간이었지만, 괜찮은 결과물을 만들 수 있었습니다! DB 서버 리소스로 인해, 서버를 내리게 되어 시각화를 직접 사용해 보실 수는 없겠지만, https://github.com/hosic2/more-wages-for-homes GitHub - hosic2/more-wages-for-homes: 부동산 가격과 임금 상승률 비교를 위한 분석 및 시각화 프로젝트부동산 가격과 임금 상승률 비교를 위한 분석 및 시각화 프로젝트. Contribute to hosic2/more-wages-for-homes de..
[데이터] Superset?
·
데이터
Apache Superset?Apache Superset은 데이터 시각화와 BI를 위한 오픈소스 웹 어플리케이션!데이터를 효율적으로 분석하고 시각화하기 위해 사용SQL 쿼리를 통해 데이터베이스와 연결하여 대시보드나 차트 형식으로 데이터를 시각화하고, 인사이트 도출!Apache Superset 주요 기능대시보드 및 차트 생성 : 데이터를 다양한 차트 형식으로 시각화할 수 있으며, 대시보드를 생성하여 여러 시각화 자료를 한 화면에 구성 가능!다양한 데이터베이스 지원 : MySQL, PostgreSQL, Oracle, Snowflake 등 다양한 SQL 기반 데이터베이스를 지원하며, SQLAlchemy를 통해 다른 데이터 소소와도 연동 가능!간단한 데이터 탐색 : 데이터 탐색 및 분석을 쉽게 할 수 있는 UI..
[시각화] WordCloud, konlpy
·
크롤링, 스크래핑, 시각화/시각화
이번 포스팅에서는 BeautifulSoup를 통해 제 블로그를 스크래핑 후 wordcloud와 konlpy를 통해 형태소를 분석 후 텍스트 구름을 만들어보려고 합니다! 길게 말하면 재미없으니, 바로 설명과 코드를 보시죠! WordCloud?wordcloud는 파이썬의 텍스트 클라우드 라이브러리로, 말 그대로 텍스트 구름을 그릴 수 있는 시각화 라이브러리입니다! konlpykonlpy는 한국어 형태소 분석기 라이브러리로, 문장 내에서 원하는 명사, 부사 등과 같은 요소를 뽑아내는 데 사용하는 라이브러리입니다! 설치pip install wordcloudpip install konlpy 실습 코드# 과도한 요청을 방지하기 위해 0.5초마다 요청 보내기!import timefrom bs4 import Beaut..