[데이터 엔지니어링 데브코스 4기] 7주차 10/31 TIL
·
데이터 엔지니어링 데브코스
안녕하세요! 김줘입니다! 어제부터 오늘 저녁까지 뻘짓을 하다 왔습니다.. 중간에 자취를 했을 때와, 이사 전 본가에서는 분명히 포트포워딩 후 DB 원격접속이 가능했는데, 새로운 집에서는 안되길래...하루종일 설정을 만지다 왔습니다... 결론은 해결하지 못했습니다...공유기가 모뎀에 물려있어서 모뎀도 포트포워딩을 해주는 식으로 해야하는데, 모뎀이 집에 있는게 아니라,이웃들의 동의를 구하거나 통신사에 문의를 해야한다고 하더군요..ㅠ 기술적 문제가 아닌, 더 난감한 문제에 부딪혀 포기를 했습니다.. Redshift 비용이 너무 빠르게 달아서 PostgreSql 서버를 열어서 사용하려했는데.. 후 오늘은 DB 원격 접속에 집중하여 빡세게 블로그 포스팅을 하지는 못했지만,2024.10.31 - [데이터] - [데..
[데이터 엔지니어링 데브코스 4기] 7주차 10/29 TIL
·
데이터 엔지니어링 데브코스
안녕하세요!! 김줘입니다. 오늘은 데이터 웨어하우스에 대한 강의가 진행되었습니다! 강사분도 바뀌었고 배우는 기술도 데엔의 핵심인 기술인 것도 있지만,강의가 자세하고 교안도 그나마 최신에다가 설명이 정말 좋아서 너무너무너무 만족스러워요. 개인적으로 AWS 강의는 전면 개편을 해야한다고 생각하지만,데이터 파트는 오히려 기간과 양을 늘려서 더 배우고 싶다는 생각이 들었습니다. 괜히 유명하신 분이 아닌 것 같아요..진짜 최악을 경험해서 그런지 체감이 더 ㅋㅋㅋㅋㅋㅋ 오늘 공부한 내용은2024.10.29 - [데이터] - [데이터] 데이터 웨어하우스?2024.10.29 - [데이터] - [데이터] 데이터 레이크?2024.10.29 - [AWS] - [데이터, AWS] 15. Redshift? 이렇게 이론만 정리했..
[데이터] 데이터 웨어하우스?
·
데이터
Data Warehouse?여러 소스에서 수집된 데이터를 통합하고, 분석 및 보고에 최적화된 방식으로 데이터를 저장하는 데이터베이스 시스템!일반적으로 기업의 의사결정 지원 시스템을 위해 회사에 필요한 모든 데이터를 모아놓은 중앙 데이터베이스라고 생각하면 됩니다!프로덕션용 데이터베이스는 OLTP(Online Transaction Processing). 즉, 운영에 최적화 되어있기에 OLAP(Online Analytical Processing, 분석)에 중점을 둔 Data Warehouse와 별개의 데이터베이스로 구성 필요!Data Warehouse의 특징주체 지향성 : 특정 비즈니스 주제를 중심으로 데이터를 적재 및 정리하여 분석에 최적화!통합성 : 다양한 소스(ERP, CRM 등)에서 온 데이터를 하나로..