[데이터] Superset?
·
데이터
Apache Superset?Apache Superset은 데이터 시각화와 BI를 위한 오픈소스 웹 어플리케이션!데이터를 효율적으로 분석하고 시각화하기 위해 사용SQL 쿼리를 통해 데이터베이스와 연결하여 대시보드나 차트 형식으로 데이터를 시각화하고, 인사이트 도출!Apache Superset 주요 기능대시보드 및 차트 생성 : 데이터를 다양한 차트 형식으로 시각화할 수 있으며, 대시보드를 생성하여 여러 시각화 자료를 한 화면에 구성 가능!다양한 데이터베이스 지원 : MySQL, PostgreSQL, Oracle, Snowflake 등 다양한 SQL 기반 데이터베이스를 지원하며, SQLAlchemy를 통해 다른 데이터 소소와도 연동 가능!간단한 데이터 탐색 : 데이터 탐색 및 분석을 쉽게 할 수 있는 UI..
[데이터] Snowflake?
·
데이터
Snowflake?Snowflake는 데이터 웨어하우스 솔루션으로, 클라우드 기반에서 대규모 데이터를 효율적으로 처리하고 분석할 수 있는 플랫폼!AWS, Azure, GCP 등 다양한 클라우드 위에서 운영 가능!대량의 데이터를 저장, 관리, 분석하는 데 최적화!인프라 관리 없이 쉽게 확장 가능하고, 비용 효율적으로 사용 가능!Snowflake 특징스토리지와 컴퓨팅 인프라가 별도로 설정되는 가변 비용 모델!SQL 기반으로 빅데이터 저장, 처리, 분석 가능!-> 비구조화된 데이터 처리와 머신러닝 기능도 제공!CSV, JSON, Avro 등 다양한 데이터 포맷 지원!-> S3, GC 클라우드 스토리지, Azure Blog Storage 지원!배치 데이터 중심이지만, 실시간 데이터 처리도 지원!Time Trav..
[데이터 엔지니어링 데브코스 4기] 7주차 10/30 TIL
·
데이터 엔지니어링 데브코스
안녕하세요!! 김줘입니다! 오늘은 어제 학습한 Redshift에 대한 실습을 진행하였습니다. 직접 S3에 데이터를 적재하고 Redshift에 COPY하여 테이블에 데이터를 넣고, 새롭게 분석용 테이블을 만드는 등 재밌는 실습이 많았어요! 아무래도 실습 위주였기에 오늘 추가적인 포스팅은 하지 않고,코딩테스트 문제를 개인적으로 풀고, 늦은 저녁에 멘토님과 1대1 미팅을 진행할 것 같아요! 새롭게 알게되는 지식과 내용에 대해서는 꾸준히 포스팅하고 있으니,앞으로도 블로그 잘 봐주세요! 오늘도 포스팅 봐주시는 여러분 감사합니다!!