跳至内容

如何使用 AWS Lake Formation 跨账户共享 AWS Glue Data Catalog 数据库和表?

3 分钟阅读
0

我想使用 AWS Lake Formation 在 AWS 账户之间共享 AWS Glue Data Catalog 数据库和表。

解决方法

借助 Lake Formation 的跨账户功能,您可以向其他 AWS 账户授予访问权限,以便在数据湖中写入和共享数据。您可以通过基于标签的访问控制或命名资源共享资源。

要使用跨账户共享,请使用以下方法之一:

  • 混合访问模式
  • 默认 AWS Identity and Access Management (IAM) Lake Formation 权限模式

先决条件:

**注意:**要使用混合访问模式或默认 IAM Lake Formation 权限模式,您必须与组织外部的目标账户共享数据库和数据库表。当您共享源账户中的所有表时,您在源账户中创建的新表将自动与目标账户共享。

混合访问模式

在源账户中,完成以下任务。

使用混合访问模式注册 Amazon S3 位置

完成以下步骤:

  1. 打开 Lake Formation 控制台,然后以数据湖管理员身份登录。
  2. 在导航窗格的 Administration(管理)下,选择 Data lake locations(数据湖位置)。
  3. 在 Data lake locations(数据湖位置)页面上,选择 Register location(注册位置)。
  4. 在 Register location(注册位置)页面上,输入以下信息:
    对于 Amazon S3 位置,请提供您的数据库和表的 Amazon Simple Storage Service (Amazon S3) 位置。
    对于 IAM 角色,请提供可以访问 Amazon S3 位置中数据的 AWS Identity and Access Management (IAM) 角色。有关此角色要求的更多详细信息,请参阅 Requirements for roles used to register locations(用于注册地点的角色的要求)。
    对于 Permission mode(权限模式),选择 Hybrid access mode(混合访问模式)。
  5. 选择 Register location(注册地点)。

注册 Amazon S3 位置后,查看数据湖的位置信息。验证权限模式是否为混合访问模式。

授予数据库和表的跨账户权限

完成以下步骤:

  1. 打开 Lake Formation 控制台,然后以数据湖管理员身份登录。
  2. 在导航窗格中,选择 Databases(数据库),然后选择相应数据库。
  3. 选择 Actions(操作),然后选择 Grant(授予)。
  4. 在 Grant permissions(授予权限)屏幕的 Principals(主体)下,选择 External account(外部账户)。
  5. 对于 AWS account ID(AWS 账户 ID)或 AWS organization ID(AWS 组织 ID),输入目标账户的账户 ID。
  6. 在 Hybrid access mode(混合访问模式)下,选择 Make Lake Formation permissions effective immediately(使 Lake Formation 权限立即生效)。
  7. 选择 Grant(授予)。
  8. 要授予表的跨账户权限,请重复前面的步骤。确保选择 All tables(所有表)或 Specific table(特定表)选项。

**注意:**此配置选择使用消费者账户 Lake Formation 管理员角色来使用 Lake Formation 权限。此次更新不会中断消费者账户对同一数据库的 IAM 和 S3 访问权限。此共享不会撤消对 IAMAllowedPrincipal 组的访问权限。

默认 IAM Lake Formation 权限模式

在源账户中,完成以下任务。

与目标账户共享数据库及其表

完成以下步骤:

  1. 打开 Lake Formation 控制台,然后以数据湖管理员身份登录。
  2. 在导航窗格中,选择 Databases(数据库),然后选择相应数据库。
  3. 选择 Actions(操作),然后选择 Grant(授予)。
  4. 在 Grant permissions(授予权限)屏幕的 Principals(主体)下,选择 External account(外部账户)。
  5. 对于 AWS account ID(AWS 账户 ID)或 AWS organization ID(AWS 组织 ID),输入目标账户的账户 ID。
  6. 对于 Table(表),选择 All tables(所有表)。
  7. 对于 Table permissions(表权限)和 Grantable permissions(可授予的权限),选择要授予的访问权限。
  8. 选择 Grant(授予)。

配置您的资源

对于目标帐户,以下配置的混合模式和默认 IAM Lake Formation 权限模式的处理过程相同:

  • 接受共享资源
  • 向 IAM 用户或角色授予权限
  • 创建资源链接

要配置您的资源,请完成以下步骤:

  1. 接受与您共享的资源。有关详细信息,请参阅 Access AWS resources shared with you(访问与您共享的 AWS 资源)。
  2. 创建指向共享 Data Catalog 数据库的资源链接。有关资源链接的详细信息,请参阅 Creating resource links(创建资源链接)。
  3. 向 IAM 用户或主体授予访问资源链接和共享数据库所需的权限。

**注意:**IAM 用户还可以在 Amazon Athena 控制台或 Amazon Redshift Spectrum 中查看数据库和资源链接。目标账户中的 IAM 用户和主体必须有权访问源账户中的 Amazon S3 路径。

要向 IAM 用户授予对共享数据库的访问权限,请执行以下操作:

  1. 打开 Lake Formation 控制台,然后以数据湖管理员身份登录。
  2. 在导航窗格中,选择 Databases(数据库)。
  3. 选择共享数据库。
  4. 选择 Actions(操作),然后选择 Grant(授予)。
  5. 在 Principals(主体)下,选择 IAM users and roles(IAM 用户和角色)。然后,选择要为其授予访问权限的 IAM 用户或主体。
  6. 在 Database permissions(数据库权限)下,选择 Describe(描述)。
  7. 选择 Grant(授予)。

**注意:**此步骤为用户提供了查看共享数据库的最低权限。

要授予对数据库中所有表或特定表的访问权限,请选择 All tables(所有表)选项:

  1. 在 All tables(所有表)下,选择资源链接。
  2. 选择 Actions(操作),然后选择 Grant(授予)。
  3. 选择 IAM users and roles(IAM 用户和角色)。然后,选择要为其授予访问权限的 IAM 用户或主体。
  4. 在 LF-Tags or catalog resources(LF 标签或目录资源)下,执行以下操作:
    要授予对数据库中所有表的访问权限,请在 Tables - optional(表 - 可选)中选择 All tables(所有表)。
    要仅授予对数据库中特定表的访问权限,请在 Tables - optional(表 - 可选)中选择特定表。
  5. 对于 Table permissions(表权限)和 Grantable permissions(可授予权限),选择 Select(选择),然后选择 Describe(描述)。
  6. 选择 Grant(授予)。

**注意:**您只能授予您在源账户的 Grantable permissions(可授予的权限)中选择的权限。

授予所需权限后,您可以从目标账户查询 Athena 中的表。

**注意:**如果您撤销之前从源账户授予的权限,则目标账户将无法访问共享数据库或表。但是,您在目标账户中创建的资源链接不会自动删除。必须手动删除该资源链接。

只与目标账户共享表

要与目标账户共享单个表,请完成“配置您的资源”部分中的步骤。作为步骤的一部分,更新以下资源:

源账户

要从 Lake Formation 控制台向目标账户授予访问权限,请选择单个表而不是选择数据库。

目标账户

要在 Lake Formation 控制台中访问共享表,请接受 AWS Resource Access Manager (AWS RAM) 控制台中的资源共享。然后,为共享表创建资源链接。创建资源链接后,您可以使用数据湖管理员访问权限查询共享表。

要向 IAM 用户和主体授予对共享表的访问权限,您必须授予资源链接的权限。

**注意:**授予对表的权限时,您可以限制只能访问表中的特定列。如果您限制访问权限,则目标账户只能查看共享表中的这些列。

当您删除数据库或表时,Lake Formation 不会自动删除 AWS RAM 中的资源共享。在删除共享数据库或表之前,必须手动撤消跨账户权限。

相关信息

Granting permissions on Data Catalog resources(授予对 Data Catalog 资源的权限)

How AWS Lake Formation cross-account feature works(AWS Lake Formation 跨账户功能的工作方式)

Updating cross-account data sharing version settings(更新跨账户数据共享版本设置)

Setting up hybrid access mode - common scenarios(设置混合访问模式 - 常见场景)