[데이터 엔지니어링 데브코스 4기] 6주차 10/21 TIL
·
데이터 엔지니어링 데브코스
안녕하세요!!주말동안 내리 잠만 자고 돌아온 김줘입니다. 이번주는 SQL에 대한 강의가 주로 이루어져 있기에, 저에게는 쉬어가는 주차라고 생각되어, 조금 여유로운 마음으로 강의를 수강하고 있습니다! SQL에 대한 내용은 따로 포스팅은 하지 않을거에요!거의 4년 전에 제가 작성한 포스팅이지만, SQL을 처음 접하시는 분에게는 도움이 될 것 같아요!2021.01.28 - [데이터] - [SQL] SQL 첫 걸음 음.. 그렇기에 TIL보다는 오늘의 일기가 될 것 같습니다!매일을 방에서 살기에 특별한 일은 거의 없지만, 썰을 좀 풀자면.. 오늘 저처럼 퇴사한지 얼마 안 된 대학 후배에게 연락이 왔습니다.저는 퇴사 후 본가에 들어와 있기에, 고정 지출이 통신비와 쿠팡와우, 유튜브 프리미엄.. 등 말고는 발생하지 ..
[데이터 엔지니어링 데브코스 4기] 5주차 10/18 TIL
·
데이터 엔지니어링 데브코스
안녕하세요, 김줘입니다! 오늘은 프로젝트 기간이 완전히 종료되고, 새로운 분야의 강의가 시작되었습니다! 바로 데이터베이스, 데이터 웨어하우스에 대한 강의입니다!! 강의에서는 어떤 데이터 웨어하우스가 있는지, 클라우드에는 어떤 것이 있는지 강의가 여러 기술을 설명하는 식으로 이루어져서 해당 강의를 통한 포스팅을 당장 작성하는 데에는 무리가 있다고 생각이 들어요! 그렇기에 추후에 강의가 이어지고 실습이 이어지면서 포스팅을 하게 될 예정입니다! 대상으로는1. Redshift2. Spark3. 데이터베이스 이론 등 이 있을 것 같아요! 추후 계획은 뒤로하고,오늘 들은 강의에 대해 더 말하자면, 저는 그래도 데이터 분야에서 일한 경력이 있기에, 그 관점에서 말하자면.. 클라우드 상에서의 데이터베이스와 해당 이론에..
[데이터 엔지니어링 데브코스 4기] 5주차 10/17 TIL
·
데이터 엔지니어링 데브코스
오늘은 어제보다는 괜찮은 김줘입니다! 드디어 1차 프로젝트의 일정표 상 마지막 날이 되었습니다. 방금 멘토님과 팀 미팅을 끝마치고 이 글을 작성 중에 있는데요! 흠..사실 다른 팀의 결과물에 비해 저희 팀 결과물은 굉장히 소박하다고 생각합니다. 사용한 데이터의 양도 적고, 크롤링도 일회성으로 사용했고.. 모델에 이미 데이터를 모두 넣어놓아서.. api의 활용 없이 진행했으니.. 소박할 수 밖에 없겠죠........ 멘토님은 그래도 파이썬에 익숙하지 않고, Django를 처음 쓰는 3명이서 3일만에 이렇게 한 건 잘한 것이라는 말을 해주셨지만...그 뒤에 추후에 한 번만 크롤하는 것이 아닌, 스케줄을 두고 크롤하고, api를 더 활용하게 하면 좋겠다라는 리뷰를 해주셨지만, 아마도 저는 해당 프로젝트는 더 ..