데이터메쉬1 2025 데이터 아키텍처의 진화와 트렌드: DW에서 AI-Ready 레이크하우스까지 📊 1. 빅데이터 플랫폼의 진화지난 10여 년간 데이터 플랫폼은 **데이터 웨어하우스(DW)**에서 시작해, 데이터 레이크, 그리고 최근에는 레이크하우스로 진화해 왔습니다.기존 DW는 정형 데이터 중심이라 반정형·비정형 데이터를 다루기 어려웠고, 머신러닝이나 AI 워크로드에는 한계가 있었습니다. 이에 따라 데이터 레이크가 등장해 다양한 형태의 데이터를 수용할 수 있게 되었죠. 하지만 데이터 레이크는 관리·거버넌스 측면에서 불편함이 많아, 결국 ACID 트랜잭션을 지원하는 오픈 테이블 포맷 기반의 레이크하우스가 업계 표준으로 자리잡고 있습니다 ✅ 데이터 웨어하우스 → 데이터 레이크 → 레이크하우스정형 위주 DW에서 반정형/비정형 + ML 대응을 위한 데이터 레이크로 확장레이크하우스: 오브젝트 스토리지 +.. 2025. 8. 17. 이전 1 다음
