Bigtable

借助 Bigtable 连接器，您可以对 Bigtable 数据执行插入、删除、更新和读取操作。

支持的版本

此连接器支持 Google Bigtable 2 版。

准备工作

在使用 Bigtable 连接器之前，请在 Google Cloud 项目中执行以下操作：

  • 确保已设置网络连接。如需了解网络模式，请参阅网络连接。
  • 向配置连接器的用户授予 roles/connectors.admin IAM 角色。
  • 将 roles/secretmanager.viewer 和 roles/secretmanager.secretAccessor IAM 角色授予您要用其来使用连接器的服务账号。
  • 启用以下服务：
    • secretmanager.googleapis.com (Secret Manager API)
    • connectors.googleapis.com (Connectors API)

    如需了解如何启用服务，请参阅启用服务。如果之前没有为您的项目启用这些服务或权限，则在您配置连接器时，系统会提示您启用。

配置连接器

一个连接需专用于一个数据源。这意味着，如果您有许多数据源，则必须为每个数据源创建单独的连接。如需创建连接，请执行以下操作：

  1. 在 Cloud 控制台 中，进入 Integration Connectors > 连接页面，然后选择或创建一个 Google Cloud 项目。

    转到“连接”页面

  2. 点击 + 新建以打开创建连接页面。
  3. 在位置部分中，选择连接的位置。
    1. 区域：从下拉列表中选择一个位置。

      如需查看所有受支持区域的列表，请参阅位置。

    2. 点击下一步。
  4. 在连接详情部分中，完成以下操作：
    1. 连接器：从可用连接器的下拉列表中选择 Bigtable。
    2. 连接器版本：从可用版本的下拉列表中选择一个连接器版本。
    3. 在连接名称字段中，输入连接实例的名称。

      连接名称必须符合以下条件：

      • 连接名称可以使用字母、数字或连字符。
      • 字母必须小写。
      • 连接名称必须以字母开头，以字母或数字结尾。
      • 连接名称不能超过 49 个字符。
    4. （可选）输入连接实例的说明。
    5. 您可以选择启用 Cloud Logging，然后选择日志级别。默认情况下，日志级别设置为 Error。
    6. 服务账号：选择具有所需角色的服务账号。
    7. 项目 ID：包含 Bigtable 实例的项目的 ID。
    8. 实例 ID：Bigtable 实例 ID。
    9. 连接池大小：Bigtable 连接池大小。
    10. （可选）配置连接节点设置：

      • 节点数下限：输入连接节点数下限。
      • 节点数上限：输入连接节点数上限。

      节点是处理事务的连接单元（或副本）。 连接处理越多事务就需要越多节点，相反，处理越少事务需要越少节点。 如需了解节点如何影响连接器价格，请参阅连接节点的价格。如果未输入任何值，则默认情况下，节点数下限设置为 2（以便提高可用性），节点数上限设置为 50。

    11. （可选）点击 + 添加标签，以键值对的形式向连接添加标签。
    12. 点击下一步。
  5. 在身份验证部分中，输入身份验证详细信息。
    1. 选择身份验证类型，然后输入相关详细信息。

      Bigtable 连接支持以下身份验证类型：

      • 服务账号身份验证
      • OAuth 2.0 - 授权代码

      2. 如需了解如何配置这些身份验证类型，请参阅配置身份验证。

    2. 点击下一步。
  6. 查看：查看您的连接和身份验证详细信息。
  7. 点击创建。

配置身份验证

根据您要使用的身份验证输入详细信息。

  • 服务账号身份验证：确保服务账号具有所需的角色。
  • OAuth 2.0 - 授权代码
    • 客户端 ID：应用提供的客户端 ID。
    • 范围：所需范围的列表
    • 客户端密钥：包含应用的客户端密钥的 Secret Manager 密文。
    • Secret 版本：上方所选 Secret 的 Secret 版本。

连接配置示例

本部分列出了您在创建关联时配置的各种字段的示例值。

服务账号身份验证连接类型

字段名称 详细信息
位置 asia-east1
版本 1
连接器 bigtable
连接器版本 1
连接名称 googlecloud-bigtable-service-authontication
服务账号 SERVICE_ACCOUNT_NAME@PROJECT_ID.iam.gserviceaccount.com
项目 ID PROJECT_ID
实例 ID gcloud-bigtable-instance
连接池大小 1
节点数下限 2
节点数上限 50
客户端密钥 bigtable-client-secret
密钥版本 1

OAuth 2.0 - 授权代码连接类型

字段名称 详细信息
位置 asia-east1
版本 1
连接器 bigtable
连接器版本 1
连接名称 bigtable-oauth
服务账号 SERVICE_ACCOUNT_NAME@PROJECT_ID.iam.gserviceaccount.com
项目 ID PROJECT_ID
实例 ID googlecloud-bigtable-instance
连接池大小 1
节点数下限 2
节点数上限 50
客户端密钥 bigtable-client-secret
密钥版本 1

系统限制

Bigtable 连接器每个节点每秒最多可以处理 16 笔事务，并会对超出此限制的所有事务进行节流。默认情况下，Integration Connectors 会为连接分配 2 个节点（以提高可用性）。

如需了解适用于 Integration Connectors 的限制，请参阅限制。

在集成中使用 Bigtable 连接

创建连接后，该连接将在 Apigee Integration 和 Application Integration 中可用。您可以通过连接器任务在集成中使用该连接。

  • 如需了解如何在 Apigee Integration 中创建和使用连接器任务，请参阅连接器任务。
  • 如需了解如何在 Application Integration 中创建和使用连接器任务，请参阅连接器任务。

实体、操作和动作

所有集成连接器都会为所连接应用的对象提供抽象层。您只能通过此抽象访问应用的对象。抽象作为实体、操作和动作向您展示。

  • 实体：实体可以被视为连接的应用或服务中的对象或属性集合。不同连接器的实体定义也会有所不同。例如，在数据库连接器中，表是实体；在文件服务器连接器中，文件夹是实体；在消息传递系统连接器中，队列是实体。

    但可能的情况是，连接器不支持或不具有任何实体，在这种情况下，Entities 列表将为空。

  • 操作：操作是指您可以对实体执行的操作。您可以对实体执行以下任一操作：

    从可用列表中选择一个实体，系统会生成该实体可用的操作列表。如需了解操作的详细说明，请参阅连接器任务的实体操作。不过，如果连接器不支持任何实体操作，则 Operations 列表中不会列出此类不受支持的操作。

  • 动作：动作是可通过连接器接口提供给集成的头等函数。动作可让您对一个或多个实体进行更改，并且动作因连接器而异。通常，操作将具有一些输入参数和一个输出参数。但可能的情况是，连接器不支持任何动作，在这种情况下，Actions 列表将为空。

实体操作示例

本部分介绍如何在此连接器中执行一些实体操作。

示例 - 从表中获取记录

  1. 在 Configure connector task 对话框中，点击 Entities。
  2. 从 Entity 列表中选择 Table。
  3. 选择 Get 操作，然后点击完成。
  4. 将实体 ID 设置为“Get Operation”。如需设置实体 ID，请在数据映射的数据映射器部分，点击打开数据映射编辑器，然后在输入值字段中输入 row99，并选择 EntityId 作为本地变量。

示例 - 列出表中的所有记录

  1. 在 Configure connector task 对话框中，点击 Entities。
  2. 从 Entity 列表中选择 Table。
  3. 选择 List 操作，然后点击完成。

示例 - 在表中创建记录

  1. 在 Configure connector task 对话框中，点击 Entities and select Table2。
  2. 选择 Create 操作，然后点击完成。
  3. 将 RowKey 设置为“Create”操作。如需设置 RowKey，请在数据映射的 Data Mapper 部分中，点击 Open Data Mapping Editor（打开数据映射编辑器），然后在 Input Value（输入值）字段中输入 ，并将列族的 RowKey 和 Payload 作为本地变量提供。

示例 - 更新表中的记录

  1. 在 Configure connector task 对话框中，点击 Entities and select Table。
  2. 选择 Update 操作，然后点击完成。
  3. 将实体 ID 设置为更新操作。如需设置实体 ID，请在数据映射的数据映射器部分，点击打开数据映射编辑器，然后在输入值字段中输入 ，并将行键和列族的载荷作为本地变量提供。

示例 - 从表中删除记录

  1. 在 Configure connector task 对话框中，点击 Entities and select Table2。
  2. 选择 Delete 操作，然后点击完成。
  3. 将实体 ID 设置为“Delete”操作。如需设置实体 ID，请在数据映射的数据映射器部分，点击打开数据映射编辑器，然后在输入值字段中输入 row99，并选择 EntityId 作为本地变量。

向 Google Cloud 社区寻求帮助

您可以在 Google Cloud 社区的 Cloud 论坛中发布您的问题以及讨论此连接器。

后续步骤