안녕하세요! 김줘입니다!! 오늘은 Docker에 대한 강의가 진행되었습니다!! 양이 정말 어마무시하게 많았어요.. 이론도 이론이지만 헷갈리는 부분도 많았고, 실습도 많아서 시간이 오래걸렸어요..정리 내용은 해당 포스팅에서 확인하실 수 있습니다! 2024.11.13 - [Docker] - [Docker] 1. Docker?2024.11.13 - [분류 전체보기] - [Docker] 2. Docker 기본 명령어2024.11.13 - [Docker] - [Docker] 3. Docker Hub? 우선 한 번 따라하고, 정리한 다음, 계속해서 실습하며 이해를 할 필요가 있다고 생각해서 제가 정리한 내용을 시간 날 때마다 한번씩 훑어 볼 예정입니다! 그리고 이번 3차팀 멘토님이 굉장히 좋은 분이신 것 같아요!팀..

안녕하세요! 김줘입니다! 오늘은 Airflow의 Backfill에 대해 추가적인 설명이 이어졌고,Operator를 통한 MySQL -> S3 -> Redshift로의 DAG를 어떻게 만들 수 있는 지에 대한 강의가 이어졌습니다! Operator가 종류가 굉장히 많아서, 내부 파라미터까지 정리하기 위해 저도 공부하고 알아볼 필요가 있을 것 같아서 추후 포스팅할 것 같습니다!해당 이유로 오늘은 Backfill에 대한 포스팅만 존재합니다..2024.11.12 - [데이터/Airflow] - [Airflow] 5. Backfill? 내일부터는 Docker와 K8S에 대한 강의가 순차적으로 이루어질 예정이라, 조금 바빠질 것 같아요!강의가 무시무시하게 많더라구요... 그리고 오늘 새로운 3차 팀원분들과 첫 스크럼..

안녕하세요! 김줘입니다!! 오늘은 커리큘럼 상으로는 11주차이지만,왜인지는 모르겠지만(?) 저에게는 9주차인 날이면서 빼빼로데이입니다! 물론 저는 빼빼로를 하나도 받지 못했습니다...익숙해요.. 이제는... 오늘은 Airflow의 설정과 빅데이터 기반 데이터 웨어하우스에서 기본 키를 보장하는 방법, backfill에 기초적인 이론에 대해 학습했습니다!2024.11.11 - [데이터/Airflow] - [Airflow] 4. Airflow.cfg?2024.11.11 - [데이터] - [데이터] Primary Key Uniqueness? 오늘 Backfill까지 정리를 하려고 했지만,내일 강의에서 추가로 설명이 될 것 같아, 아직 작성하지 않았습니다! Backfill에 대한 내용의 설명이 끝나면, 추가로 포..