检查点
Create a lake, zone, and asset in Dataplex
/ 30
Create a tag template
/ 30
Apply a tag template to Dataplex assets
/ 40
标记 Dataplex 资产
GSP1145
概览
Dataplex 是一种智能数据结构脉络,使组织能够跨数据湖、数据仓库和数据集市集中发现、管理、监控和治理其数据,从而实现大规模分析。
Data Catalog 是 Dataplex 中一项可扩缩的全托管式元数据管理服务,您可以使用它来标记数据资产并搜索您有权访问的资产。利用标记,您可以将自定义元数据字段附加到特定的数据资产,以便进行轻松识别和检索(例如,将特定资产标记为包含受保护数据或敏感数据的数据);您还可以创建可重用的标记模板来快速地将相同的标记分配给不同的数据资产。
在本实验中,您将了解如何使用 Dataplex 中的 Data Catalog 来创建标记模板并将其应用于 Dataplex 资产,以及如何使用标记来搜索资产。
您将执行的操作
- 启用 Dataplex API 和 Data Catalog API
- 在 Dataplex 中创建数据湖、区域和资产
- 创建标记模板
- 将标记模板应用于 Dataplex 资产
- 使用标记搜索资产
设置和要求
点击“开始实验”按钮前的注意事项
请阅读以下说明。实验是计时的,并且您无法暂停实验。计时器在您点击开始实验后即开始计时,显示 Google Cloud 资源可供您使用多长时间。
此实操实验可让您在真实的云环境中开展实验活动,免受模拟或演示环境的局限。我们会为您提供新的临时凭据,让您可以在实验规定的时间内用来登录和访问 Google Cloud。
为完成此实验,您需要:
- 能够使用标准的互联网浏览器(建议使用 Chrome 浏览器)。
- 完成实验的时间 - 请注意,实验开始后无法暂停。
如何开始实验并登录 Google Cloud 控制台
-
点击开始实验按钮。如果该实验需要付费,系统会打开一个弹出式窗口供您选择付款方式。左侧是实验详细信息面板,其中包含以下各项:
- 打开 Google Cloud 控制台按钮
- 剩余时间
- 进行该实验时必须使用的临时凭据
- 帮助您逐步完成本实验所需的其他信息(如果需要)
-
点击打开 Google Cloud 控制台(如果您使用的是 Chrome 浏览器,请右键点击并选择在无痕式窗口中打开链接)。
该实验会启动资源并打开另一个标签页,显示登录页面。
提示:请将这些标签页安排在不同的窗口中,并将它们并排显示。
注意:如果您看见选择账号对话框,请点击使用其他账号。 -
如有必要,请复制下方的用户名,然后将其粘贴到登录对话框中。
{{{user_0.username | "<用户名>"}}} 您也可以在实验详细信息面板中找到用户名。
-
点击下一步。
-
复制下面的密码,然后将其粘贴到欢迎对话框中。
{{{user_0.password | "<密码>"}}} 您也可以在实验详细信息面板中找到密码。
-
点击下一步。
重要提示:您必须使用实验提供的凭据。请勿使用您的 Google Cloud 账号凭据。 注意:在本次实验中使用您自己的 Google Cloud 账号可能会产生额外费用。 -
继续在后续页面中点击以完成相应操作:
- 接受条款及条件。
- 由于该账号为临时账号,请勿添加账号恢复选项或双重验证。
- 请勿注册免费试用。
片刻之后,系统会在此标签页中打开 Google Cloud 控制台。
启用 Dataplex API 和 Data Catalog API
-
在 Google Cloud 控制台顶部的搜索栏中,输入 Cloud Dataplex API。
-
点击 Marketplace 下面的 Cloud Dataplex API 搜索结果。
-
点击启用。
-
对 Google Cloud Data Catalog API 重复第 1 步到第 3 步。
任务 1. 创建数据湖、区域和资产
在本任务中,您需要新建 Dataplex 数据湖来存储客户订单信息,向该数据湖添加精选区域,然后将预先创建的 BigQuery 数据集作为新资产附加到该区域中。
创建数据湖
- 在 Google Cloud 控制台的导航菜单 () 中,依次点击分析 > Dataplex。
如果系统提示欢迎体验新版 Dataplex
,请点击关闭。
-
点击管理数据湖下的管理。
-
点击创建数据湖。
-
输入所需信息以创建一个新的数据湖:
属性 | 值 |
---|---|
显示名称 | Orders Lake |
ID | 保留默认值。 |
资源区域 |
保留其他默认值。
- 点击创建。
数据湖创建过程最长可能需要 3 分钟。
向数据湖添加区域
-
在管理标签页上,点击数据湖的名称。
-
点击添加区域。
-
输入所需信息以创建一个新的区域:
属性 | 值 |
---|---|
显示名称 | Customer Curated Zone |
ID | 保留默认值。 |
类型 | 精选区域 |
数据位置 | 区域级 |
保留其他默认值。
例如,默认情况下,发现设置下的启用元数据发现选项处于选中状态,允许获得授权的用户发现区域中的数据。
- 点击创建。
区域创建过程最长可能需要 2 分钟。
将资产附加到区域
-
在区域标签页上,点击区域的名称。
-
在资产标签页上,点击添加资产。
-
点击添加资产。
-
输入所需信息以附加新资产:
属性 | 值 |
---|---|
类型 | BigQuery 数据集 |
显示名称 | Customer Details Dataset |
ID | 保留默认值。 |
数据集 |
|
保留其他默认值。
-
点击完成。
-
点击继续。
-
在发现设置中,选择继承以继承区域级别的发现设置,然后点击继续。
-
点击提交。
任务 2. 创建标记模板
要开始标记数据,您首先需要创建一个或多个标记模板。标记模板可以是公开标记模板或非公开标记模板。在您新建标记模板时,用于创建公开标记模板的选项为推荐的默认选项。对某数据资产拥有所需查看权限的用户可以查看与该数据资产关联的所有公开标记。这支持进行简单的发现搜索,同时还遵循已对底层数据实施的数据访问权限控制。
在本任务中,您需要创建一个公开标记模板,以便为 BigQuery 表列添加受保护状态标签。利用公开标记模板,有权访问底层 BigQuery 表列的用户将能够查看对这些列应用的标记。
-
在左侧菜单的管理目录下,点击标记模板。
-
点击创建标记模板。
-
输入所需信息以定义标记模板:
属性 | 值 |
---|---|
模板显示名称 | Protected Data Template |
模板 ID | 保留默认值。 |
位置 | |
公开范围 | 公开 |
- 点击添加字段,然后输入所需信息,以便为模板添加新字段:
属性 | 值 |
---|---|
字段显示名称 | Protected Data Flag |
字段 ID | 保留默认值。 |
类型 | 枚举 |
-
在枚举值 > 值 1 中,输入
YES
。 -
点击添加值,然后在值 2 中,输入
NO
。 -
点击完成。
-
点击创建。
任务 3. 将标记模板应用于 Dataplex 资产
创建标记模板后,您可以使用它将标记附加到您有权访问的任意数量的所需数据资产中。
在本任务中,您需要将先前创建的标记模板应用于 BigQuery 表中要添加受保护数据状态标签的特定列。
-
在左侧菜单中的发现下,点击搜索。
-
在过滤条件 > 系统中,选中 Dataplex 对应的复选框。
-
点击 customer_details 表。
如果您未看到 customer_details 表,请稍等几分钟,然后刷新页面,以便 Dataplex 资产列表进行更新。
-
点击附加标记。
-
在选择要标记的内容中,选中以下列所对应的复选框:
- zip
- state
- last_name
- country
- latitude
- first_name
- city
- longitude
-
点击确定。
-
在选择标记模板中,选择 Protected data template。
-
在 Protected data flag 中,选择 YES。
-
点击保存。
任务 4. 使用标记搜索资产
在标记数据资产后,您可以在 Dataplex 中使用 Data Catalog 搜索它们。
在本任务中,您需要搜索已使用 Protected Data 标记模板标记的资产。
-
在左侧菜单中的发现下,点击搜索。
-
在过滤条件 > 标记中,选中 Protected data template 对应的复选框。
-
点击 customer_details 表。
-
点击架构和列标记标签页,以查看指定列上的“Protected Data”标记。
恭喜!
您使用 Dataplex 中的 Data Catalog 创建了标记模板并将其应用于 Dataplex 资产,然后使用了标记来搜索资产。
Google Cloud 培训和认证
…可帮助您充分利用 Google Cloud 技术。我们的课程会讲解各项技能与最佳实践,可帮助您迅速上手使用并继续学习更深入的知识。我们提供从基础到高级的全方位培训,并有点播、直播和虚拟三种方式选择,让您可以按照自己的日程安排学习时间。各项认证可以帮助您核实并证明您在 Google Cloud 技术方面的技能与专业知识。
上次更新手册的时间:2023 年 9 月 20 日
上次测试实验的时间:2023 年 9 月 20 日
版权所有 2024 Google LLC 保留所有权利。Google 和 Google 徽标是 Google LLC 的商标。其他所有公司名和产品名可能是其各自相关公司的商标。