课程目录

中间件与大数据

数据治理

数据治理确保数据的质量、安全与合规。元数据管理、数据血缘、数据质量是三大支柱。

核心要点

  • 元数据管理:技术元数据+业务元数据,Apache Atlas/DataHub
  • 数据血缘:数据从产生到消费的完整链路追踪
  • 数据质量:完整性、准确性、一致性、及时性、唯一性
  • Data Catalog:数据资产的发现、理解与协作平台

关联知识