전통적인 중앙 집중식 데이터 아키텍처는 현대적인 요구의 가중에 따라 긴장을 풀고 있습니다. 조직이 성장함에 따라 데이터 요구와 병목 현상이 커집니다. 데이터 메쉬를 입력하십시오 : 기업이 데이터 아키텍처 및 소유권에 대해 어떻게 생각 하는지를 재정의하는 획기적인 접근 방식.
핵심적으로, 데이터는 데이터를 제품으로 취급하고 도메인 지향 팀을 자신의 데이터 세트로 관리, 서비스 및 혁신 할 책임을함으로써 데이터 소유권을 분산시킵니다. 중앙 데이터 팀이 모든 것을 관리하는 전통적인 데이터 호수 또는 창고와 달리 데이터 메시는 마케팅, 금융, 운영 등의 개별 비즈니스 단위 (데이터를 담당 할 수 있도록 권한을 부여합니다.
이것이 왜 중요합니까?
중앙 집중식 모델은 확장하기 위해 노력하기 때문입니다. 조직이 더 많은 데이터를 수집함에 따라 중앙 팀은 요청에 압도되어 종종 통찰력을 지연시키고 혁신 둔화를 지연시킵니다. 대조적으로, 데이터 메쉬는 확장 가능, 민첩하며 도메인 별 데이터 운영을 가능하게하여 시간을 크게 향상시킵니다.
개념의 원래 건축가 인 Zhamak Dehghani에 따르면, 데이터 메쉬의 네 가지 기둥은
- 도메인 지향 데이터 소유권
- 제품으로서의 데이터
- 셀프 서비스 데이터 인프라
- 연합 계산 거버넌스
이러한 원칙은 자율성을 가능하게 할뿐만 아니라 책임과 데이터 품질도 촉진합니다. 각 도메인 팀은 발견 가능성, 보안 및 신뢰성을 포함한 데이터 제품의 수명주기를 담당합니다. 이는 고품질 데이터 세트와 과도한 중앙 IT에 대한 의존성이 적습니다.
입양이 이미 진행 중입니다. Netflix, JPMorgan Chase 및 Intuit은 사일로를 분해하고 분석을 가속화하기 위해 데이터 메쉬를 탐색하거나 구현하는 회사 중 하나입니다. Snowflake, Databricks 및 DBT와 같은 클라우드 네이티브 도구를 통해 도메인 별 데이터 제품을 구축하는 것은 결코 가능하지 않았습니다.
결론?
조직이 데이터 운영을 확장하는 데 어려움을 겪고있는 경우 데이터 메시를 통한 데이터 소유권 분산이 다음 경쟁 우위 일 수 있습니다. 그것은 단순한 기술적 변화가 아니라 문화적 변화입니다. 그리고 막 시작되었습니다.
