数据管理示例设置

重要

仅停用 Microsoft Purview 数据治理功能

Microsoft Purview 统一目录和经典 Microsoft Purview 数据治理功能 (以前称为 Azure Purview) 即将停用。 Microsoft Purview 整体未停用。 Microsoft Purview 数据安全性和合规性功能不受此公告的影响,Microsoft 将继续对其进行投资。

Microsoft 正在 Microsoft Fabric 中整合其 数据治理 功能。 无法再创建新的 Microsoft Purview 数据治理帐户,现有数据治理功能将在 2027 年 11 月 12 日前保持维护模式。

有关停用时间表、过渡指南和建议的后续步骤,请参阅 Microsoft Purview 数据治理停用公告。

Microsoft Purview 数据治理以 Microsoft Purview 统一目录和 Microsoft Purview 数据映射为特色,可提供全面的可见性、数据信心和负责任的创新,帮助组织在 AI 时代实现更大的业务价值。 使用管理健康数据的示例,按照本文中的步骤操作,了解如何设置统一目录,并使用其功能为组织构建健全的数据治理实践。

步骤 1:在统一目录中设置治理域

治理域是建立数据问责制的关键,并有助于在整个公司范围内对该数据进行联合治理。 创建治理域时,请从适当的所有者开始,以确保您可以有效地识别数据资产中的所有数据并与专家协作。 治理域可以是许多不同的类型,以与治理该数据的团队的数据边界类型保持一致。 例如:功能域 (财务、人力资源、销售) 或数据域 (产品、客户、健康) 。

先决条件

授予权限并构建第一个治理域

  1. 打开 Microsoft Purview 门户。

  2. 使用具有 角色管理 角色 (例如 Purview 管理员) 的管理员帐户的凭据登录到 Microsoft Purview 门户。 转到 “设置 > ”角色和范围以 查看和管理。

  3. 选择 “角色组”。

  4. 在“ Microsoft Purview 解决方案的角色组 ”页上,选择 “数据治理 ”角色组。

  5. 在“ 编辑角色组成员 ”页上,选择 “选择用户 ”或“ 选择组”。

  6. 选中要添加到角色组的所有用户或组的复选框。

  7. 选择 “选择”。

  8. 在统一目录中,选择“ 目录管理”,然后选择“ 治理域”。

  9. 在 “治理域 ”页上,可以设置目录的其余部分,使其他人能够联合数据的所有权、使团队能够构建其知识并建立数据的业务价值。

    1. 首先选择 “新建治理域”。
      1. 可以更新治理域的名称。 对于本教程,请将其命名为“ (个人健康教程) ”,并描述“个人健康数据是指在医疗保健部门内收集和使用的与个人身心健康相关的任何信息。 这些数据可以包括多种类型,例如病历、治疗史、诊断图像和实验室测试结果。 它通常受到各种法律法规的保护,以确保隐私和机密性。
      2. 选择类型为“数据域”。
      3. 将父 (留空 如果这是目录中的第一个治理域,则它没有父) 。
      4. 选择“创建”。
      5. 现在,你自己再创建两个域。 这些域是组织中用于协作和管理的联合身份验证的关键点。 考虑在实现统一目录时谁可能是域的所有者。
        1. 可以遵循以下示例:
        • 企业功能域代表整个公司使用的高度控制的资产和术语。 - Sales 是一个功能域,大多数组织都将其视为公司的子域。
  10. 选择你创建的治理域。

  11. 选择治理域的“ 角色 ”选项卡。

  12. 默认情况下,创建治理域时,系统会向治理域中的所有角色添加您。 作为治理域所有者,您可以添加域) 中的数据管理员 (业务专家,以及知道哪些数据资产最适合其他人使用) 的数据产品所有者 (。

  13. 切换回 “详细信息 ”选项卡。

  14. 选择 “管理策略” 以应用域级策略。 此策略适用于域中的所有数据产品。 通过启用策略的自动应用,数据专家不必也是策略专家。

  15. 在 “管理访问策略 ”选项卡中,选中 “允许数据副本 ”旁边的复选框。通过选择此策略选项,它会自动应用证明,要求请求访问数据产品的所有用户证明他们了解数据的数据复制策略。

  16. 选择“ 保存更改” 以确认治理域设置了策略。

  17. 在治理域上选择“ 发布 ”,这将发布域中的所有其他概念。

创建术语表术语

将术语表术语添加到治理域可帮助其他人了解业务如何使用和解释数据。 术语表术语还可确保见解使用通用术语,并且通常使用您在整个治理领域的知识。

  1. 在治理域的页面上,找到 术语表术语 卡片,然后选择查看 全部。

  2. 在 术语表术语 页上,选择 新术语。

  3. 输入详细信息: 1. 名称:“爆发”。

    1. 描述:一种影响或有可能影响大部分人口的疾病。
    2. 您现在可以将其余部分留空,但有一些字段要收集:负责为您的公司定义术语的术语所有者,要共享的常用首字母缩略词也称为术语名称,最后,您可以提供指向资源的链接,这些资源将包含有关该术语的更多信息。
  4. 选择“创建”。

  5. 选择 “管理策略”。 与域级别策略类似,可以创建术语级别策略,无论在何处使用该术语,都适用这些策略。

  6. 选中“ 需要经理审批”旁边的框。 当请求访问数据产品时,此策略强制执行 Microsoft Entra ID 中的用户管理员的二次审批。

  7. 为创建的爆发词选择发布。 已发布的术语可在统一目录中进行筛选,并确保使用该术语来描述其数据产品的其他人在浏览数据产品时可以在统一目录中看到该说明。

  8. 现在再创建两个术语。 这一次,选择“爆发”术语作为所创建术语的父术语。 尝试在任一术语的相关选项卡中建立这些子术语之间的关系,以帮助建立这些术语如何协同工作以解释整个主题的网络。

    1. 大流行:影响多个国家/地区或大陆的大量人群的疾病全球爆发。
    2. 流行病:全国或区域范围内爆发具有高度传染性并影响很大一部分人口的疾病。
  9. 尝试在您之前创建的任何其他域中创建其他几个术语。 如果不确定要添加哪些内容,请选择“ 获取建议的术语 ”,让生成性 AI 根据你已提供的域的说明和名称推荐一些术语。

添加 OKR

为个人健康域添加 OKR (目标和关键结果) ,以帮助其他人了解你的数据的业务价值。 此步骤在您的数据与其提供的商业价值之间建立直接联系。

  1. 从治理域页中选择 OKR 框。

  2. 选择 “新建 OKR”。

  3. 首先输入目标的详细信息:

    1. 目标:通过使患者能够有效接种疫苗来降低大流行风险。
    2. 所有者:输入你的姓名
    3. 目标日期:“2024-12-31”
  4. 选择“创建”。

  5. 将关键结果添加到目标中,使目标可衡量并监控实现目标的进度。 选择 添加关键结果。

  6. 输入关键结果详细信息:

    1. 主要成果:确保在 2024 日历年年底前,80% 的 65 岁 (以上最有可能受疫情影响) >的老年人组完全接种疫苗。
    2. 进度状态: 按计划进行
    3. 进度金额:70
    4. 目标金额:80
    5. 最大金额:100
  7. 选择“创建”。

  8. 选择“发布”。

创建关键数据元素

(Personal Health 中的 CDE) 创建关键数据元素,以确保最重要的数据列具有一致的定义和理解。 CDE 始终满足对数据的形成和存储方式的业务期望。

  1. 从已选择“个人健康”域的治理域页中,选择关键 数据元素 框。
  2. 选择 “新建关键数据元素”。
  3. 输入基本 CDE 元数据:
    1. 名称: 年龄组
    2. 描述:用于确保所需的分析报告遵循其他人可以依赖的参考的人员年龄的通用分组,并删除单个年龄以提高数据的匿名性。 年龄组分为八组: <2岁、2-4岁、5-11岁、12-17岁、18-24岁、25-49岁、50-64岁、65+岁。
    3. 所有者:输入你的姓名
    4. 预期的数据类型:文本
    5. 选择“创建”。

CDE 的真正强大之处在于它直接映射到存储此数据的物理数据列。 这种连接可确保共识,并能够大规模评估数据质量规则和策略。

  1. 从刚刚创建的 CDE 中,选择 “添加列”。

  2. 从数据湖的黄金容器中搜索 Covid 19 疫苗和病例趋势数据 资产

  3. 选择“ Covid 19 疫苗和病例趋势 ”资产的框,而不是名称。

    提示

    如果选择资产的蓝色名称,则会打开一个新窗口,显示资产详细信息。

  4. 选择 AgeGroupVacc 列旁边的单选按钮。

  5. 选择“添加”。

  6. 选择刚刚创建的 CDE 顶部的“ 数据质量 ”选项卡,将数据质量规则应用于 CDE。 这类似于为术语表术语和治理域添加策略的方式。

  7. 选择 新规则

  8. 选择 数据类型匹配

  9. 输入规则名称: 确认年龄组格式

  10. 选择“创建”。

  11. 在 CDE 上选择“发布”

此 CDE 现在会自动将数据质量规则应用于使用 Covid 19 疫苗和病例趋势资产的每个数据产品,下一节将看到。

  1. 尝试在其他域中创建几个其他 CDE。 这里有一些建议:
    • Sales: Revenue and Seller Name
    • 企业: 产品 ID

第 2 步:在“数据图”中设置和注册数据

如果没有可供扫描的数据源,请按照以下步骤完全部署 Azure Data Lake Storage (ADLS Gen2) 示例。

提示

如果与 Microsoft Purview 帐户位于同一租户中已有数据源,请转到本部分的下一部分来扫描资产。

在真实数据资产中,您会发现许多不同的系统用于不同的数据应用程序。 在 Fabric 和 Snowflake 等报告环境中,团队可在其中使用数据副本构建分析解决方案,并为其报表和仪表板提供支持。 有一些运营数据系统为应用程序、团队或客户用于完成业务流程提供支持,这些业务流程根据流程中做出的决策收集或添加数据。

要创建更现实的数据资产,请在目录中显示许多数据源,这些数据源可以涵盖任何公司可能使用的不同数据的广度。 为用例提供支持所需的数据类型可能大不相同,业务用户需要报告和仪表板,分析师需要一致的维度和事实来构建报告,数据科学家或数据工程师需要直接来自收集数据的系统的原始源数据。 所有这些以及更多使不同的用户能够在同一个地方看到查找、理解和访问数据的重要性。

有关将数据添加到资产的其他教程,请按照以下指南操作:

先决条件

设置数据资产

A. 创建和填充存储帐户
  1. 按照本指南创建存储帐户: 为 Azure Data Lake Storage Gen2 创建存储帐户
  2. 为新数据湖创建容器:
    1. 转到存储帐户的 概述 页。
    2. 选择“数据存储”部分下的 “容器 ”选项卡。
      1. 选择 容器。
      2. 将容器命名为“bronze”,然后选择 “创建”。
      3. 重复这些步骤以创建“黄金”容器。
  3. 从 data.gov 下载一些示例 CSV 数据: Covid-19 Vaccination And Case Trends by Age Group, 美国
  4. 将该 CSV 上传到所创建的存储帐户中名为“bronze”的容器。
  5. 选择名为“bronze”的容器,然后选择 “上传”。
  6. 浏览保存 CSV 的位置,然后选择 Covid-19_Vaccination_Case _Trends 文件。
  7. 选择“上传”。
B. 创建 Azure 数据工厂

此步骤演示数据如何在 medallion 数据湖的各层之间移动,并确保数据采用消费者期望使用的标准化格式。 此步骤是运行数据质量的先决条件。

  1. 按照本指南创建 Azure 数据工厂: 创建 Azure 数据工厂

  2. 使用此 Azure 数据工厂指南将数据作为增量格式表复制到“bronze”容器中 CSV 中的数据: 使用映射数据流转换数据

  3. 通过在创建的 ADF 资源的“概述”选项卡上选择“启动工作室”,从 Azure 门户中打开 Azure 数据工厂 (ADF) 体验。

  4. 在 ADF Studio 中选择 “创作 ”选项卡。

  5. 选择该 + 命令,然后选择“ 数据流”。

  6. 将数据流命名为“CSVtoDeltaC19VaxTrends”。

  7. 在空白框中选择“ 添加源 ”。

  8. 将“源”设置为:

    1. 输出流名称: 'C19csv'
    2. 说明: 留空
    3. 源类型:内联
    4. 内联数据集类型:带分隔符的文本
    5. 链接服务:选择存储 csv 的数据湖
  9. 将“源选项”设置为:

    1. 文件模式: 文件
    2. 文件路径:/bronze/ Covid-19_Vaccination_Case _Trends
    3. 允许找到任何文件:不选中
    4. 更改数据捕获: 保留未选中状态
    5. 压缩类型:无
    6. 编码:默认 (UTF-8)
    7. 列分隔符:逗号 (,)
    8. 行分隔符:默认 (\r、\n 或\r\n)
    9. 双引号字符:双引号 (“)
    10. 转义字符:反斜杠 ()
    11. 第一行作为标题:选中
    12. 将其余保留为默认值
  10. 按源创建“下一步”选择“ 下一步 ”,然后选择“ 接收器”。

  11. 创建接收器,其中数据的格式和位置要存储,以将数据从“青铜”的 CSV 文件移动到“黄金”的增量表。

    1. 设置接收器值 (除非) 指定,否则保留所有设置为默认值。
    2. 接收器类型:内联。
    3. 内联数据集类型:增量。
    4. 链接服务:与源中使用的相同数据湖,因为你存储在不同的容器中。
  12. 设置设置值 (除非指定) 否则将所有设置保留为默认值

    1. 文件夹路径: gold/Covid19 Vaccine and Case Trends.
  13. 输入该值,因为此名称是你想要存储数据的方式,并且不存在可供选择。

  14. 选择 “验证”。 此操作将检查您的数据流并提供修复任何错误的说明。

  15. 选择“ 全部发布”。

  16. 选择 + 该命令,然后选择“ 管道”。

  17. 将管道命名为“CSV 到 Delta C19 Vax 趋势”。

  18. 选择在前面步骤 CSV 中创建的数据流以增量 (C19VaxTrends) ,然后将其拖放到“打开的管道”选项卡上。

  19. 选择 “验证”。

  20. 选择“发布”。

  21. 选择“ 调试” (使用活动运行时) 运行管道。

    提示

    如果遇到空格错误或增量格式字符不恰当,请打开下载的 CSV 并进行更正。 然后重新上传并覆盖青铜区中的 CSV。 然后重新运行管道。

  22. 导航到数据湖中的黄金容器,现在应该会看到管道期间创建的新增量表。

扫描资产

如果尚未将数据资产扫描到数据映射中,请按照以下步骤填充数据映射。

扫描数据资产中的源会自动收集数据资产的元数据, (这些源中的表、文件、文件夹、报表等) 。 注册数据源并创建扫描时,可以建立对目录中出现的源和资产的技术所有权。 你还可以控制谁可以访问 Microsoft Purview 中的哪些元数据。 在域级别注册和存储源和资产时,会将它们存储在最高级别的访问层次结构中。 通常情况下,最好创建一些集合,用于扫描资产元数据并为这些数据建立正确的访问层次结构。

如果选择使用 Fabric 或 SQL,请使用以下指南提供访问权限:

注册您的数据湖并扫描您的资产

  1. 在“数据映射”中的“域”选项卡下,选择域的角色 分配 (它是 Purview 帐户Microsoft名称) :

    1. 将自己添加为数据源管理员和数据管理者。
      1. 选择 “数据源管理员”角色旁边的人员图标。1. 搜索 Microsoft Entra ID 中的姓名 (可能需要输入与 Entra ID) 中拼写完全相同的全名Microsoft。
      2. 选择“确定”。
      3. 为数据管理者重复这些步骤。
  2. 注册数据湖:

    1. 选择“数据源”选项卡。
    2. 选择“注册”。
    3. 选择 Azure Data Lake Storage Gen2 存储类型。
  3. 提供连接详细信息:

    1. 订阅 (可选)
    2. 数据源名称 (这是 ADLS Gen2 源) 的名称
    3. 应 (可选) 存储资产元数据的集合
    4. 选择 “注册”
  4. 数据源注册完成后,可以配置扫描。 注册表示 Microsoft Purview 已连接到数据源,并将其放置在正确的集合中以获得所有权。 扫描从源读取元数据并填充数据映射中的资产。

  5. 选择在“数据源”选项卡中注册的源

  6. 选择新扫描并提供详细信息:

    1. 对此扫描使用默认集成运行时
    2. 凭据应Microsoft Purview MSI (系统)
    3. 扫描级别为自动检测
    4. 选择一个集合或使用域 (集合必须是注册数据源的同一集合或子集合)
    5. 选择“继续”

    提示

    此时将测试连接以验证是否可以完成扫描。 如果未授予 Microsoft Purview MSI 读取者对数据源的访问权限,则会失败。 如果您不是数据源所有者或没有用户访问参与者,则扫描将失败,因为它要求您有权创建连接。

  7. 现在只选择在本教程的“建筑数据”部分放置增量表的容器“gold”。 此选择可阻止扫描数据存储中的任何其他数据资产。

    1. 金色旁边应该只有一个蓝色复选框,您可以在所有内容旁边留下复选框,因为它将扫描完整的源,并且仍会创建我们将使用的资产等。
    2. 选择 “继续”
  8. 在选择扫描规则集屏幕中,应使用默认扫描规则集。

  9. 选择 “继续”

  10. 在设置扫描触发器中,您将设置扫描的频率,以便在继续将数据资产添加到湖的黄金容器时,它将继续填充数据映射。 选择 一次。

  11. 选择 继续。

  12. 选择“ 保存并运行”。 此操作将创建一个扫描,该扫描将从数据湖的黄金容器中读取元数据,并填充我们将在下一部分中使用的统一目录中的表。 如果仅选择保存,则不会运行扫描,并且看不到资产。 扫描运行后,你将看到创建的扫描,其上 次运行 状态为 “已排队”。 扫描读取完成后,您的资产已准备好进入下一部分。 此过程可能需要几分钟或几小时,具体取决于源中有多少资产。

步骤 3:发布数据产品

创建数据产品对于确保您的组织能够发现正确的数据至关重要。 数据产品有助于防止由于没有用途或价值有限而导致数据资产中价值低或没有价值的过度管理。 当您的数据专家发布数据产品时,您可以激活最有价值的数据,并基于该价值构建适当级别的治理。 策划技术团队不知道其业务目的的资产,或者试图管理复杂且不断增长的数据资产中的所有内容,会导致额外的时间和生产力损失,以追踪可能永远不会使用或可能只是从资产中删除的数据的详细信息。 相反,专注于具有价值以及人们需要发现和构建更多价值的数据。 随着团队使用更多数据并更好地了解需求,您可以创建更有用的数据产品来满足这些需求。 治理可以根据数据的价值和敏感性进行调整,以确保其始终保持正确的大小。

先决条件

创建和发布数据产品

  1. 打开 Microsoft Purview 门户。

  2. 选择 “统一目录”。

  3. 选择“ 目录管理” ,然后选择 “治理域”。

  4. 从 治理域 页中,选择个人健康域。

  5. 选择“转到业务概念”下的数据产品。

  6. 在这里,称为数据产品所有者的数据专家将识别要由组织中的其他人使用的数据资产,并提供必要的信息以使其可用。

  7. 选择 “新建数据产品”。

  8. 提供有关数据产品的详细信息: 1. 名称:“Covid-19 疫苗接种和病例按年龄趋势” 1.说明:“此数据来自美国卫生 & 公众服务部下属的 CDC。 该数据包含美国国家层面按年龄组划分的疫苗接种和病例趋势。 数据按至少一剂分层并完全接种疫苗。 数据还代表所有疫苗合作伙伴,包括管辖合作诊所、零售药店、长期护理机构、透析中心、联邦紧急事务管理局和卫生资源和服务管理局合作伙伴站点以及联邦实体设施。

    1. 类型:数据集
    2. 选择 下一步。
    3. 用例: This data is provided for public use and is intended to help understand the trends of vaccination up take and new cases by different age groups. The ages are banded into two groups ranging from <2 years to 65+ years. Similarly the trends are provided in daily numbers that provide seven day average of new cases by age group.
    4. 标记为已 认可 为选中。
    5. 选择“保存”。
  9. 现在,你已构建了数据产品的基本元数据。接下来,添加一些属性并映射数据映射中的资产。

  10. 选择 “添加数据资产”。

  11. 您将看到扫描到数据映射中的资产,包括数据源的所有文件夹和图层。

  12. 搜索添加到数据湖的黄金容器的 Covid19 疫苗和病例趋势 资产,然后选择此资源集。

  13. 选择“添加”。 可以根据需要为数据产品选择任意数量的资产,但这里只需要一个。

    提示

    选择“ 获取建议” ,让生成式 AI 帮助从数据映射中的资产中挑选,然后从缩减的结果列表中选择 Covid19 疫苗和病例趋势。

  14. 现在可以看到添加到数据产品的资产。

  15. 选择术语表术语标题旁边的 “添加术语” 。

  16. 选择之前创建的爆发术语,然后选择 添加。

  17. 现在应该可以看到资产中年龄组的关键数据元素已映射到数据产品。

  18. 选择 OKR 标题旁边的 “添加 OKR” 。

  19. 选择“通过实现有效的患者疫苗接种来降低大流行风险”。 这是您在 第一节中创建的目标。

管理数据产品访问请求策略

在页面顶部,发布数据产品之前的最后一步是选择 “管理策略”。 在这里,您可以通过进行选择并提供名称以供审批来配置访问策略和请求访问工作流。 还可以使用继 承策略 选项卡查看应用于之前应用的数据副本证明的治理域策略。 对于来自疫情术语表术语的 经理审批 也是如此。

  1. 选择“ 管理策略” 选项卡。

  2. 在 “访问时间限制”下,提供访问请求在需要续订前有效的时间的详细信息。 设置此值可授予最长 1 年的访问权限。

  3. 在该框中,输入 1。

  4. 在下拉列表中选择年份。

  5. 在审批要求下,在审批者框中提供你的姓名。 (它需要在 Microsoft Entra ID 中注册的名称。)

    注意

    您无需检查经理的批准,因为该策略继承自疫情术语表术语。

  6. 选择“ 预览请求表单 ”,以查看目录使用者在请求访问时查看的内容。 您会看到所需的数据复制证明和经理批准,因为它们是由治理域和术语表术语设置的。

  7. 选择“保存更改”。

映射数据资产并配置访问策略后,即可将数据产品发布到目录。

  1. 在数据产品上选择 “发布 ”。

  2. 尝试在您之前创建的其他域中创建利润报表

    1. Profit Report, Type: Dashboards/reports.
    2. 产品主数据,类型:Maser 数据和参考数据。

注意

您可以向其中添加许多资产,并查看具有许多资产的数据产品的外观。 将数据产品添加到任何域的术语中,以查看如何使用术语表使用一组一致的术语来描述数据。

步骤 4:运行数据质量

现在,您在目录中拥有可用的数据产品,运行数据质量规则会告诉每个人数据状况良好且可以使用。 随着您了解有关数据的详细信息,请添加新的数据质量规则,以确保它适合所有用例。 确保数据产品具有最高质量有助于建立对数据的信任,并向其他人表明您正在监控和改进数据。 随着数据价值的增加,您需要更密切地监控和控制这些数据的质量。 管理不善的数据质量问题可能会造成严重的负面影响。

先决条件

  • 数据质量规则只能在 ADLS Gen2 和 Microsoft Fabric 中的增量格式表上运行。
  • 必须启用 Microsoft Purview 的托管标识才能读取数据源,因为它是目前唯一支持的数据质量凭据。
  • 您必须在运行数据质量的治理域中担任 数据质量管理员角色 。
  • 你必须是所有者或对要连接的数据源具有用户访问管理员访问权限 数据质量扫描,以确保获得适当的安全授权来扫描数据。
  • 您必须具有 数据配置文件管理员角色 才能对数据运行配置文件。

创建和运行数据质量规则

  1. 打开 Microsoft Purview 门户。

  2. 选择 “统一目录”。

  3. 选择“数据管理”下的“数据质量”选项卡。

  4. 选择 在第 1 部分中创建的个人健康域。

  5. 选择 “管理”,然后选择“ 连接”。 构建此连接时,可以对该治理域中的数据源运行数据质量扫描。 此步骤可防止团队在未经适当授权的情况下访问数据。

  6. 在连接屏幕上选择 “新建 ”以创建新连接: 1. 输入显示名称“Personal Health ADLSg2 DQ”。

    1. 选择 Azure Data Lake Storage Gen2 的源类型。
      1. 输入 在第 2 节中创建的数据源的详细信息。

        注意

        凭据必须Microsoft Purview MSI (系统) 才能建立数据质量连接。

      2. 选择 “测试连接”。
      3. 测试连接后,选择 “提交”。

建立连接后,您就可以运行配置文件并开始构建数据质量规则。 此步骤可确保了解业务规则和适当规则的专家在最重要的数据产品上运行。

  1. 返回到 “数据质量 ”页。
  2. 选择个人健康治理域。
  3. 选择第 3 节中内置的“Covid-19 疫苗接种和病例按年龄趋势”数据产品。
  4. 选择你添加到数据产品的资产。 (它必须是 第 2 部分 的增量格式,否则数据质量将无法运行) 。
  5. 将数据质量规则应用于数据列,以衡量它是否满足您的质量期望:
    1. 选择所选资产上的 “规则” 选项卡。
    2. 选择 “新建规则”。
    3. 选择“空/空白字段规则”。
    4. 输入详细信息:
      • 从列下拉列表中选择 AgeGroupVacc 列
      • 规则名称: 确认疫苗接种年龄组存在
    5. 选择“创建”。
    6. 选择 “新建规则”。
    7. 选择 “数据类型匹配”。
    8. 输入详细信息。
    9. 选择 DateAdministered 列。
    10. 选择“创建”。
  6. 选择“ 运行数据质量扫描”。

个人资料数据

为数据创建配置文件,以查看每列的高级统计信息,并发现可能需要新规则的任何异常。

  1. 在统一目录中,选择 运行状况管理,然后选择数据 质量。
  2. 选择 个人资料数据。
  3. 选中 “列名称” 旁边的顶部框以分析所有列。 系统会推荐要分析的列,您可以选择您知道值得分析的列,以帮助防止对高度敏感数据或您知道填充稀疏的数据进行分析。
  4. 选择 “运行配置文件”。

扫描完成后,可以查看新数据产品的数据质量评分和配置文件。 目录的所有用户都可以看到数据质量分数,因此每个人都知道数据的状态。

创建数据质量扫描计划,以确保持续监控数据质量问题。 设置警报以确保在消费者受到影响之前解决数据质量问题。

  1. 在 运行状况管理下,选择 “数据质量”。
  2. 选择配置数据质量规则的“个人健康”域。
  3. 从 “管理” 下拉列表中,选择 “计划扫描”。
  4. 在 “计划扫描” 页上,选择 “新建”。
  5. 添加 概述 详细信息
    1. 名称:Personal Health DQ Monthly Evaluation
    2. 说明:DQ 规则的月度扫描,以便持续改进。
  6. 选择 “继续”
  7. 选择扫描范围
  8. 选中“ Covid-19 疫苗接种和病例按年龄趋势” 数据产品旁边的框
  9. 选择 “继续”
  10. 计划扫描以确保它在每个月的最后一天运行
    1. 选择 定期
    2. 定期:每 1 个月一次
    3. 月份天数: 过去
    4. 计划扫描时间 (UTC) :12:00:00
    5. 在 (UTC) 开始重复周期:保留为默认值
  11. 选择 “继续”
  12. 在保存之前,请查看扫描的详细信息以查看是否有任何要进行的更改。
  13. 选择“保存”。 由于先前触发了手动扫描,因此现在无需触发另一次扫描。 如果需要新的扫描,请选择 “保存并运行”。

配置警报

计划扫描以确保数据质量后,您可以设置警报,以通知管理员出现问题或需要注意数据质量问题或扫描失败。 针对扫描失败和分数下降超过 5% 时配置数据质量警报。

  1. 在 “数据质量 ”页上返回到“个人健康”域。
  2. 从 “管理” 下拉列表中,选择 “警报”。
  3. 选择 新建。
  4. 输入警报详细信息
    1. 显示名称:个人健康 DQ 月度扫描
    2. 说明: 确保最低 DQ 阈值满足消费者的期望。
    3. 目标:分数下降幅度超过
    4. 阈值:5
    5. 关闭通知:保持未选中状态
    6. 打开质量扫描失败通知:保持选中状态
    7. 收件人:输入你的姓名
  5. 选择 继续。

提示

在统一目录中实现时,将警报发送给管理员,他们可以通知使用者问题,并与数据的技术所有者合作进行更正。

在本部分结束时,你将获得一个具有操作数据质量的正常统一目录,可用于管理提供给组织数据使用者的数据。 一切都是为了向消费者提供最有价值的数据,并建立对他们使用的数据的信任。 随着数据价值的增长和新数据策略的出现,下一节将介绍如何管理整个目录或使用主数据更深入地进行特定数据管理。

第 5 步:主数据管理

主数据管理 (MDM) 是一致性最重要的数据实体的做法,这些实体必须准确、唯一且一致地应用于业务的所有领域,因为这些数据中的错误和问题可能会影响整个业务。 通过我们的一个 MDM 合作伙伴,你可以将所选的 MDM 解决方案与 Microsoft Purview 集成,以实现数据统一、标准化和清理,从而实现黄金记录创建和将主数据作为数据产品发布。

请按照此处的教程获取所需的解决方案: Microsoft Purview 中的主数据管理

步骤 6:管理数据运行状况

在统一目录的 健康管理 领域,中央数据办公室和其他数据管理员可以根据其公司标准评估数据状态,并有效地管理其战略进度。 为了确保公司中的每个人都知道他们可以做些什么来增加数据的价值,必须理解这些标准并可扩展到整个组织,而无需让每个人都成为数据治理专家。 从开箱即用的行业标准控件集开始,每个数据办公室都可以自定义控件以满足他们的期望,并确保它符合他们的数据目标。 这些控制的有效性不仅在于衡量这些标准,还在于确保数据负责人能够自行采取行动,并对影响数据价值的改进负责。 在 Data Estate Health 中,您可以设置和管理所有这些关键功能。

先决条件

使用数据资产运行状况评估数据管理

  1. 打开 Microsoft Purview 门户。

  2. 选择 “统一目录”。

  3. 在左侧导航栏的 “数据资产运行状况 ”下,选择 “运行状况控制”。

  4. 选择“值创建”控制组旁边的胡萝卜>。

  5. 将鼠标悬停在控件标题上时,选择铅笔图标以编辑控件。 通过编辑控件,可以更改控件的阈值,以设置对分数的期望值,并设置颜色评分以演示进度阶段。

  6. 通过详细信息,你可以提供控件的说明及其对组织的意义,并为特定控件设置所有者。

  7. 选择控件的 “规则” 选项卡以更改阈值。 此设置的目标很高,如果不健康,跟进至关重要。

    1. 继承自组:切换开关 (应变为灰色) 。
    2. 目标得分:90
    3. 选择 “新建规则”。
    4. 将分数旁边的框设置为 GreaterThanOrEqual
    5. 将百分比设置为 90
    6. 状态 = 运行状况 (绿色)
    7. 否则框状态 = 严重 (紫色)
    8. 选择“保存”。
  8. 在数据资产运行状况下,选择 元数据质量。

可在此处更改或添加创建控件分数的规则。 在这里,您需要更改 价值创建 操作的严重性,以确保所有用户都知道此操作的重要性。

  1. 选择 “配置严重性”
  2. 选择“ 值创建 ”控制组
  3. 选择 业务 OKR 对齐 控件标题
  4. 将“严重性”从“中”更改为“高”,然后选择 “保存”
  5. 选择 “运行状况操作 ”选项卡
  6. 筛选器 分配到: 到你的名字
  7. 选择一个操作,您可以在其中查看操作的所有者需要执行哪些操作来确保满足治理期望,或者他们可以分配新的所有者以获取最佳专家来提供其意见。 还有一种状态可以让其他人知道正在进行的工作以及其他行动可能需要优先考虑的地方。

第 7 步:数据民主化

数据民主化使用户能够以合规的方式查找和访问他们需要的数据。 它确保人们能够找到建立商业价值所需的数据。 统一目录提供干净简单的数据发现体验。 它使管理员能够大规模更新和管理目录中提供的数据。 在本部分中,您将了解用户如何查找和请求对数据的访问,并确保适当的审批者可以跟踪并提供有关这些访问请求的输入。

先决条件

发现数据产品

  1. 在统一目录中,选择 “发现”,然后选择 “ 数据产品”。
  2. 在 “数据产品 ”页上,使用搜索栏按年龄搜索疫苗接种率。
  3. 此处将看到在 第 2 部分中发布的数据产品。 此视图显示用户如何仅查看为其准备的数据,并且防止用户不必浏览高度技术性的数据资产。
  4. 选择“ Covid-19 疫苗接种和病例按年龄趋势” 数据产品
    1. 使用者可以在此处看到你提供的元数据以及你在安装过程中配置的任何其他属性。 数据质量分数也在这里,因此消费者在访问数据之前就知道质量。
    2. 选择资产,使用者可以看到数据资产中可用的所有列。
    3. 选择疫情术语表术语,消费者可以看到有关该术语的说明和其他信息,从而更深入地了解数据。
  5. 一旦消费者确信他们想要使用该数据,他们就需要获得对数据的批准访问。
    1. 选择 “请求访问权限”
    2. 填写表单详细信息以提交请求。
    3. 用户:留下你的姓名
    4. 经理审批:自动要求并定向到 Microsoft Entra ID 管理器。
    5. 用途:选择用途
    6. 业务理由:OKR 监视
    7. 选中证明旁边的框,表明你理解使用此数据的期望。
    8. 选择 “发送”。

访问请求现在将发送到 Microsoft Entra ID 中列出的管理器。 在此处,经理可以通过打开电子邮件并选择链接或进入 Microsoft Purview 来访问请求。 可以直接在 Microsoft Purview 中批准和管理访问权限。

  1. 在统一目录中,选择“ 目录管理”,然后选择 “请求”。
  2. 选择 个人健康 域。
  3. 选择提交的请求。
  4. 现在,审批者可以通过在请求上选择 答复来 批准或拒绝。