1️⃣ 데이터 레이크(Data Lake)란?**데이터 레이크(Data Lake)**는 구조화된 데이터와 비정형 데이터를 원본 그대로 저장하는 데이터 저장소입니다.대표적인 특징은 다음과 같습니다.✔ 대용량 데이터 저장✔ 다양한 데이터 형식 저장✔ 데이터 분석 및 머신러닝 활용 가능기업에서는 데이터 레이크를 통해 다양한 데이터를 모아 데이터 기반 의사결정을 수행합니다.2️⃣ 데이터 레이크 등장 배경기존 기업들은 데이터를 **데이터 웨어하우스(Data Warehouse)**에 저장했습니다.하지만 데이터가 폭발적으로 증가하면서 다음과 같은 문제가 발생했습니다.비정형 데이터 처리 어려움높은 저장 비용유연하지 않은 스키마 구조이 문제를 해결하기 위해 등장한 것이 데이터 레이크입니다.3️⃣ 데이터 레이크 구조일반적인..
1️⃣ 데이터 메시(Data Mesh)란 무엇인가?데이터 메시(Data Mesh)는 도메인 중심의 분산 데이터 아키텍처입니다.쉽게 말하면데이터 플랫폼을 하나의 중앙 조직이 관리하는 것이 아니라 각 도메인 팀이 책임지는 구조입니다.예를 들어 기업 조직이 다음과 같이 나뉘어 있다고 가정해 보겠습니다.커머스 팀마케팅 팀고객 분석 팀기존 방식에서는 데이터 플랫폼 팀이 모든 데이터를 관리했습니다.하지만 데이터 메시에서는각 팀이 자신의 데이터를 직접 관리하고 제공하는 방식입니다.이러한 접근 방식은 데이터 확장성과 조직 효율성을 높이는 데 목적이 있습니다.2️⃣ 왜 데이터 메시가 등장했을까?대규모 기업에서는 데이터 플랫폼이 점점 복잡해지는 문제가 있습니다.대표적인 문제는 다음과 같습니다.✔ 중앙 데이터 팀의 병목 현..