Bigtable

Com o conector do Bigtable, você pode realizar operações de inserção, exclusão, atualização e leitura nos dados do Bigtable.

Versões compatíveis

Esse conector oferece suporte à versão 2 do Google Bigtable.

Antes de começar

Antes de usar o conector do Bigtable, faça o seguinte no projeto Google Cloud :

  • Verifique se a conectividade de rede está configurada. Para informações sobre padrões de rede, consulte Conectividade de rede.
  • Conceda a função do IAM roles/connectors.admin ao usuário que configura o conector.
  • Conceda os papéis do IAM roles/secretmanager.viewer e roles/secretmanager.secretAccessor à conta de serviço que você quer usar para o conector.
  • Ative os seguintes serviços:
    • secretmanager.googleapis.com (API Secret Manager)
    • connectors.googleapis.com (API Connectors)

    Para entender como ativar os serviços, consulte Como ativar serviços. Se esses serviços ou permissões não tiverem sido ativados no seu projeto, você precisará ativá-los ao configurar o conector.

Configurar o conector

Uma conexão é específica a uma fonte de dados. Isso significa que, se você tiver muitas fontes de dados, precisará criar uma conexão separada para cada uma. Para criar uma conexão, faça o seguinte:

  1. No console do Cloud, acesse a página Integration Connectors > Conexões e selecione ou crie um projeto do Google Cloud.

    Acessar a página "Conexões"

  2. Clique em + CRIAR NOVO para abrir a página Criar conexão.
  3. Na seção Local, escolha o local da conexão.
    1. Região: selecione um local na lista suspensa.

      Para conferir a lista de todas as regiões com suporte, consulte Locais.

    2. Clique em PRÓXIMA.
  4. Na seção Detalhes da conexão, faça o seguinte:
    1. Conector: selecione Bigtable na lista suspensa de conectores disponíveis.
    2. Versão do conector: selecione a versão do conector na lista suspensa de versões disponíveis.
    3. No campo Nome da conexão, insira um nome para a instância de conexão

      Os nomes de conexão precisam atender aos seguintes critérios:

      • Os nomes de conexões podem usar letras, números ou hifens.
      • As letras precisam ser minúsculas.
      • Os nomes das conexões precisam começar com uma letra e terminar com uma letra ou um número.
      • Os nomes das conexões não podem ter mais de 49 caracteres.
    4. Como opção, insira uma Descrição para a instância de conexão.
    5. Como opção, ative o Cloud Logging e selecione um nível de registro. Por padrão, o nível de registro é definido como Error.
    6. Conta de serviço: selecione uma conta de serviço que tenha os papéis necessários.
    7. ID do projeto: o ID do projeto que contém a instância do Bigtable.
    8. ID da instância: o ID da instância do Bigtable.
    9. Tamanho do pool de conexões: o tamanho do pool de conexões do Bigtable.
    10. Opcionalmente, defina as Configurações do nó de conexão:

      • Número mínimo de nós: digite o número mínimo de nós de conexão.
      • Número máximo de nós: digite o número máximo de nós de conexão.

      Um nó é uma unidade (ou réplica) de uma conexão que processa transações. Mais nós são necessários para processar mais transações para uma conexão e, por outro lado, menos nós são necessários para processar menos transações. Para entender como os nós afetam os preços do conector, consulte Preços dos nós de conexão. Se você não inserir qualquer valor, por padrão, os nós mínimos serão definidos como 2 (para melhor disponibilidade) e os nós máximos serão definidos como 50.

    11. Outra opção é clicar em + ADICIONAR MARCADOR para adicionar um rótulo à conexão na forma de um par de chave-valor.
    12. Clique em PRÓXIMA.
  5. Na seção Autenticação, insira os detalhes da autenticação.
    1. Selecione um Tipo de autenticação e insira os detalhes relevantes.

      A conexão do Bigtable é compatível com os seguintes tipos de autenticação:

      • Autenticação da conta de serviço
      • Código de autorização OAuth 2.0
    2. Para entender como configurar esses tipos de autenticação, consulte Configurar autenticação.

    3. Clique em PRÓXIMA.
  6. Revisão: revise os detalhes de conexão e autenticação.
  7. Clique em Criar.

Configurar a autenticação

Digite os detalhes com base na autenticação que você quer usar.

  • Autenticação da conta de serviço: verifique se a conta de serviço tem os papéis necessários.
  • Código de autorização OAuth 2.0
    • ID do cliente: o ID do cliente fornecido pelo aplicativo.
    • Escopos: lista de escopos desejados
    • Chave secreta do cliente: o secret do Secret Manager que contém a chave secreta do cliente para o aplicativo.
    • Versão do secret: versão do secret selecionada acima.

Exemplos de configuração de conexão

Esta seção lista os valores de exemplo para os vários campos que você configura ao criar a conexão.

Tipo de conexão da autenticação da conta de serviço

Nome do campo Detalhes
Local asia-east1
Versão 1
Conector bigtable
Versão do conector 1
Nome da conexão googlecloud-bigtable-service-authontication
Conta de serviço SERVICE_ACCOUNT_NAME@PROJECT_ID.iam.gserviceaccount.com
ID do projeto PROJECT_ID
ID da instância gcloud-bigtable-instance
Tamanho do pool de conexões 1
Número mínimo de nós 2
Número máximo de nós 50
Chave secreta do cliente bigtable-client-secret
Versão do secret 1

OAuth 2.0: tipo de conexão do código de autorização

Nome do campo Detalhes
Local asia-east1
Versão 1
Conector bigtable
Versão do conector 1
Nome da conexão bigtable-oauth
Conta de serviço SERVICE_ACCOUNT_NAME@PROJECT_ID.iam.gserviceaccount.com
ID do projeto PROJECT_ID
ID da instância googlecloud-bigtable-instance
Tamanho do pool de conexões 1
Número mínimo de nós 2
Número máximo de nós 50
Chave secreta do cliente bigtable-client-secret
Versão do secret 1

Limitações do sistema

O conector do Bigtable pode processar no máximo 16 transações por segundo, por , e limita qualquer transação além desse limite. Por padrão, os Integration Connectors alocam dois nós (para melhor disponibilidade) para uma conexão.

Para informações sobre os limites aplicáveis aos Integration Connectors, consulte Limites.

Usar a conexão do Bigtable em uma integração

Depois de criar a conexão, ela fica disponível na integração da Apigee e Application Integration. É possível usar a conexão em uma integração pela tarefa de conectores.

  • Para entender como criar e usar a tarefa "Connectors" na integração da Apigee, consulte Tarefa Connectors.
  • Para entender como criar e usar a tarefa "Conectores" na Application Integration, consulte Tarefa "Conectores".

Entidades, operações e ações

Todos os Integration Connectors fornecem uma camada de abstração para os objetos do aplicativo conectado. Só é possível acessar os objetos de um aplicativo por esta abstração. A abstração é exposta a você como entidades, operações e ações.

  • Entidade: uma entidade pode ser considerada um objeto ou um conjunto de propriedades no aplicativo ou serviço conectado. A definição de uma entidade difere de um conector para outro. Por exemplo, em um conector de banco de dados, as tabelas são as entidades, em um conector de servidor de arquivos, as pastas são as entidades e, em um conector de sistema de mensagens, as filas são as entidades.

    No entanto, é possível que um conector não aceite ou não tenha entidades. Nesse caso, a lista Entities estará vazia.

  • Operação: uma operação é a atividade que pode ser realizada em uma entidade. É possível executar qualquer uma das seguintes operações em uma entidade:

    Selecionar uma entidade na lista disponível gera uma lista de operações disponíveis para ela. Para uma descrição detalhada das operações, consulte as operações de entidades da tarefa "Conectores". No entanto, se um conector não oferecer suporte a nenhuma das operações de entidade, essas operações sem suporte não serão listadas na lista Operations.

  • Ação: uma ação é uma função de primeira classe disponibilizada para a integração por meio da interface do conector. Uma ação permite fazer alterações em uma ou mais entidades e varia de um conector para outro. Normalmente, uma ação tem alguns parâmetros de entrada e um de saída. No entanto, é possível que o conector não ofereça suporte a nenhuma ação. Nesse caso, a lista Actions estará vazia.

Exemplos de operações de entidade

Esta seção mostra como realizar algumas das operações de entidade neste conector.

Exemplo: extrair um registro de uma tabela

  1. Na caixa de diálogo Configure connector task, clique em Entities.
  2. Selecione Table na lista Entity.
  3. Selecione a operação Get e clique em Concluído.
  4. Defina o ID da entidade como "Get Operation". Para definir o ID da entidade, na seção Data Mapper do Mapeamento de dados, clique em Abrir editor de mapeamento de dados e digite row99 no campo Valor de entrada e escolha o EntityId como variável local.

Exemplo: listar todos os registros de uma tabela

  1. Na caixa de diálogo Configure connector task, clique em Entities.
  2. Selecione Table na lista Entity.
  3. Selecione a operação List e clique em Concluído.

Exemplo: criar um registro em uma tabela

  1. Na caixa de diálogo Configure connector task, clique em Entities and select Table2.
  2. Selecione a operação Create e clique em Concluído.
  3. Defina a operação "Criar" para a chave da linha. Para definir a chave de linha, na seção Data Mapper do Mapeamento de dados, clique em Abrir editor de mapeamento de dados e insira no campo Valor de entrada e forneça a chave de linha e o payload para a família de colunas como variável local.

Exemplo: atualizar um registro em uma tabela

  1. Na caixa de diálogo Configure connector task, clique em Entities and select Table.
  2. Selecione a operação Update e clique em Concluído.
  3. Defina o ID da entidade como "Atualizar operação". Para definir o ID da entidade, na seção Data Mapper do Mapeamento de dados, clique em Abrir editor de mapeamento de dados e insira no campo Input Value e forneça a chave de linha e o payload para a família de colunas como variável local.

Exemplo: excluir um registro de uma tabela

  1. Na caixa de diálogo Configure connector task, clique em Entities and select Table2.
  2. Selecione a operação Delete e clique em Concluído.
  3. Defina o ID da entidade como "Excluir operação". Para definir o ID da entidade, na seção Data Mapper do Data Mapping, clique em Open Data Mapping Editor e digite row99 no campo Input Value e escolha EntityId como variável local.

Receber ajuda da comunidade do Google Cloud

Poste suas dúvidas e converse sobre esse conector na comunidade do Google Cloud em Fóruns do Cloud.

A seguir