현재 설계된 데이터 파이프라인은 특정 날짜의 데이터를 저장하는 구조이다. 하지만, 데이터 분석과 시각화를 진행하기 위해선, 현재 방식으로는 충분한 데이터를 확보하기 어렵다. 데이터 파이프라인 설계를 처음 시도하다 보니, "일단 해보자"는 마음으로 진행했지만, 이를 통해 설계상의 한계를 명확히 느낄 수 있었다. 특히, 초기 설계의 중요성을 크게 느꼈다. 데이터 파이프라인의 설계는 목적에 따라 매우 달라지며, 명확한 목표 설정 없이 진행하면 원하는 결과를 얻기 어려울 수 있다는 것을 배웠습니다. 따라서 이번에는 데이터 분석 목표를 명확히 설정한 후, 데이터 파이프라인을 재구축할 계획이다. 충분한 데이터를 수집하고 저장할 수 있는 구조를 설계함으로써, 이후의 분석과 시각화까지 진행할 예정이다. 1. 데이..