[데이터 엔지니어링 데브코스 4기] 7주차 10/31 TIL
·
데이터 엔지니어링 데브코스
안녕하세요! 김줘입니다! 어제부터 오늘 저녁까지 뻘짓을 하다 왔습니다.. 중간에 자취를 했을 때와, 이사 전 본가에서는 분명히 포트포워딩 후 DB 원격접속이 가능했는데, 새로운 집에서는 안되길래...하루종일 설정을 만지다 왔습니다... 결론은 해결하지 못했습니다...공유기가 모뎀에 물려있어서 모뎀도 포트포워딩을 해주는 식으로 해야하는데, 모뎀이 집에 있는게 아니라,이웃들의 동의를 구하거나 통신사에 문의를 해야한다고 하더군요..ㅠ 기술적 문제가 아닌, 더 난감한 문제에 부딪혀 포기를 했습니다.. Redshift 비용이 너무 빠르게 달아서 PostgreSql 서버를 열어서 사용하려했는데.. 후 오늘은 DB 원격 접속에 집중하여 빡세게 블로그 포스팅을 하지는 못했지만,2024.10.31 - [데이터] - [데..
[데이터] Snowflake?
·
데이터
Snowflake?Snowflake는 데이터 웨어하우스 솔루션으로, 클라우드 기반에서 대규모 데이터를 효율적으로 처리하고 분석할 수 있는 플랫폼!AWS, Azure, GCP 등 다양한 클라우드 위에서 운영 가능!대량의 데이터를 저장, 관리, 분석하는 데 최적화!인프라 관리 없이 쉽게 확장 가능하고, 비용 효율적으로 사용 가능!Snowflake 특징스토리지와 컴퓨팅 인프라가 별도로 설정되는 가변 비용 모델!SQL 기반으로 빅데이터 저장, 처리, 분석 가능!-> 비구조화된 데이터 처리와 머신러닝 기능도 제공!CSV, JSON, Avro 등 다양한 데이터 포맷 지원!-> S3, GC 클라우드 스토리지, Azure Blog Storage 지원!배치 데이터 중심이지만, 실시간 데이터 처리도 지원!Time Trav..