[데이터 엔지니어링 데브코스 4기] 8주차 11/5 TIL
·
데이터 엔지니어링 데브코스
안녕하세요! 김줘입니다!! 오늘도 어김없이 데이터 웨어하우스를 이용한 시각화 프로젝트를 진행 중입니다! 매일 블로그에 포스팅을 하려고 하는데,프로젝트 기간에는 쓸 말이 없어서 큰일이에요 ㅋㅋㅋㅋㅋㅋ 우선 오늘은 어제 찾아놓은 서울시 GeoJson을 통해 각 자치구를 기준으로 시각화를 진행하고,팀원 분들을 도와 다양한 차트 작성을 진행하였습니다! 생각보다 superset이 지원하는 범주와 커스텀의 범위가 좁아 많이 불편한 것 같아요. 비용에 문제가 없고 기회가 된다면,Tableau나 PowerBI를 다음 프로젝트에 사용하려고 생각 중입니다! 요즘따라 이렇게 시각화를 하고, 다양한 기술을 써서 그런지 재밌는 것 같아요 ㅋㅋㅋ 더 전달 드릴 말씀이 없어서오늘 포스팅은 여기서 마치도록 하겠습니다! 오늘도 포스팅..
[데이터 엔지니어링 데브코스 4기] 8주차 11/4 TIL
·
데이터 엔지니어링 데브코스
안녕하세요! 김줘입니다! 오늘도 어김없이 두번째 프로젝트를 진행하고 있습니다!! 프로젝트는 그래도 진척은 있지만, 애매한 점이 좀 있는 것 같아요. 우선, '데이터 웨어하우스와 데이터 마트의 근본적인 차이와 현재 데이터로 어느 것을 구성해야 하고, 구성 방향을 어떻게 해야하는가'이 생각을 계속 하게 되네요 팀원 모두 착하고 친절한 분들이라 재밌게 진행은 하고 있는데,정확한 방향성이 어떤 것인지 계속해서 생각하게 되네요. 오늘 진행한 내용을 간단히 얘기하자면,1. 원본 데이터 정규화 (너무 과하게 정규화 한 것 같다는 생각..)2. 정규화한 데이터를 토대로 데이터 구조 재구성3. 재구성 한 구조를 대상으로 세부 주제 재설정 및 쿼리 작성 입니다! 결과물을 만들게 된다면 포스팅해볼게요! 항상 감사합니다 여러..
[데이터 엔지니어링 데브코스 4기] 7주차 11/1 TIL
·
데이터 엔지니어링 데브코스
안녕하세요!! 김줘입니다!! 오늘부터 2차 프로젝트 기간이에요! 이번 팀원분들은 굉장히 적극적이라서 재미있게 하고있습니다! 어떤 프로젝트인지 설명드리자면!데이터 웨어하우스와 시각화 툴을 이용해서, 저희가 수집한 데이터를 적재하고 시각화 대시보드를 만드는 프로젝트입니다! 지난번에 진행한 프로젝트보다는 훨씬 간단한 것 같아요! (자동화를 안하는 방안으로 해서..) 프로젝트하느라 당분간 짧은 인사와 진행사항만 말씀드리고 마치겠습니다! 오늘도 포스팅 봐주시는 여러분 감사합니다!!