Bigtable
Com o conector do Bigtable, você pode realizar operações de inserção, exclusão, atualização e leitura nos dados do Bigtable.
Versões compatíveis
Esse conector oferece suporte à versão 2 do Google Bigtable.
Antes de começar
Antes de usar o conector do Bigtable, faça o seguinte no projeto Google Cloud :
- Verifique se a conectividade de rede está configurada. Para informações sobre padrões de rede, consulte Conectividade de rede.
- Conceda a função do IAM roles/connectors.admin ao usuário que configura o conector.
- Conceda os papéis do IAM
roles/secretmanager.viewer
eroles/secretmanager.secretAccessor
à conta de serviço que você quer usar para o conector. - Ative os seguintes serviços:
secretmanager.googleapis.com
(API Secret Manager)connectors.googleapis.com
(API Connectors)
Para entender como ativar os serviços, consulte Como ativar serviços. Se esses serviços ou permissões não tiverem sido ativados no seu projeto, você precisará ativá-los ao configurar o conector.
Configurar o conector
Uma conexão é específica a uma fonte de dados. Isso significa que, se você tiver muitas fontes de dados, precisará criar uma conexão separada para cada uma. Para criar uma conexão, faça o seguinte:
- No console do Cloud, acesse a página Integration Connectors > Conexões e selecione ou crie um projeto do Google Cloud.
- Clique em + CRIAR NOVO para abrir a página Criar conexão.
- Na seção Local, escolha o local da conexão.
- Região: selecione um local na lista suspensa.
Para conferir a lista de todas as regiões com suporte, consulte Locais.
- Clique em PRÓXIMA.
- Região: selecione um local na lista suspensa.
- Na seção Detalhes da conexão, faça o seguinte:
- Conector: selecione Bigtable na lista suspensa de conectores disponíveis.
- Versão do conector: selecione a versão do conector na lista suspensa de versões disponíveis.
- No campo Nome da conexão, insira um nome para a instância de conexão
Os nomes de conexão precisam atender aos seguintes critérios:
- Os nomes de conexões podem usar letras, números ou hifens.
- As letras precisam ser minúsculas.
- Os nomes das conexões precisam começar com uma letra e terminar com uma letra ou um número.
- Os nomes das conexões não podem ter mais de 49 caracteres.
- Como opção, insira uma Descrição para a instância de conexão.
- Como opção, ative o Cloud Logging e selecione um nível de registro. Por padrão, o nível de registro é definido como
Error
. - Conta de serviço: selecione uma conta de serviço que tenha os papéis necessários.
- ID do projeto: o ID do projeto que contém a instância do Bigtable.
- ID da instância: o ID da instância do Bigtable.
- Tamanho do pool de conexões: o tamanho do pool de conexões do Bigtable.
- Opcionalmente, defina as Configurações do nó de conexão:
- Número mínimo de nós: digite o número mínimo de nós de conexão.
- Número máximo de nós: digite o número máximo de nós de conexão.
Um nó é uma unidade (ou réplica) de uma conexão que processa transações. Mais nós são necessários para processar mais transações para uma conexão e, por outro lado, menos nós são necessários para processar menos transações. Para entender como os nós afetam os preços do conector, consulte Preços dos nós de conexão. Se você não inserir qualquer valor, por padrão, os nós mínimos serão definidos como 2 (para melhor disponibilidade) e os nós máximos serão definidos como 50.
- Outra opção é clicar em + ADICIONAR MARCADOR para adicionar um rótulo à conexão na forma de um par de chave-valor.
- Clique em PRÓXIMA.
-
Na seção Autenticação, insira os detalhes da autenticação.
- Selecione um Tipo de autenticação e insira os detalhes relevantes.
A conexão do Bigtable é compatível com os seguintes tipos de autenticação:
- Autenticação da conta de serviço
- Código de autorização OAuth 2.0
- Clique em PRÓXIMA.
Para entender como configurar esses tipos de autenticação, consulte Configurar autenticação.
- Selecione um Tipo de autenticação e insira os detalhes relevantes.
- Revisão: revise os detalhes de conexão e autenticação.
- Clique em Criar.
Configurar a autenticação
Digite os detalhes com base na autenticação que você quer usar.
- Autenticação da conta de serviço: verifique se a conta de serviço tem os papéis necessários.
-
Código de autorização OAuth 2.0
- ID do cliente: o ID do cliente fornecido pelo aplicativo.
- Escopos: lista de escopos desejados
- Chave secreta do cliente: o secret do Secret Manager que contém a chave secreta do cliente para o aplicativo.
- Versão do secret: versão do secret selecionada acima.
Exemplos de configuração de conexão
Esta seção lista os valores de exemplo para os vários campos que você configura ao criar a conexão.
Tipo de conexão da autenticação da conta de serviço
Nome do campo | Detalhes |
---|---|
Local | asia-east1 |
Versão | 1 |
Conector | bigtable |
Versão do conector | 1 |
Nome da conexão | googlecloud-bigtable-service-authontication |
Conta de serviço | SERVICE_ACCOUNT_NAME@PROJECT_ID.iam.gserviceaccount.com |
ID do projeto | PROJECT_ID |
ID da instância | gcloud-bigtable-instance |
Tamanho do pool de conexões | 1 |
Número mínimo de nós | 2 |
Número máximo de nós | 50 |
Chave secreta do cliente | bigtable-client-secret |
Versão do secret | 1 |
OAuth 2.0: tipo de conexão do código de autorização
Nome do campo | Detalhes |
---|---|
Local | asia-east1 |
Versão | 1 |
Conector | bigtable |
Versão do conector | 1 |
Nome da conexão | bigtable-oauth |
Conta de serviço | SERVICE_ACCOUNT_NAME@PROJECT_ID.iam.gserviceaccount.com |
ID do projeto | PROJECT_ID |
ID da instância | googlecloud-bigtable-instance |
Tamanho do pool de conexões | 1 |
Número mínimo de nós | 2 |
Número máximo de nós | 50 |
Chave secreta do cliente | bigtable-client-secret |
Versão do secret | 1 |
Limitações do sistema
O conector do Bigtable pode processar no máximo 16 transações por segundo, por nó, e limita qualquer transação além desse limite. Por padrão, os Integration Connectors alocam dois nós (para melhor disponibilidade) para uma conexão.
Para informações sobre os limites aplicáveis aos Integration Connectors, consulte Limites.
Usar a conexão do Bigtable em uma integração
Depois de criar a conexão, ela fica disponível na integração da Apigee e Application Integration. É possível usar a conexão em uma integração pela tarefa de conectores.
- Para entender como criar e usar a tarefa "Connectors" na integração da Apigee, consulte Tarefa Connectors.
- Para entender como criar e usar a tarefa "Conectores" na Application Integration, consulte Tarefa "Conectores".
Entidades, operações e ações
Todos os Integration Connectors fornecem uma camada de abstração para os objetos do aplicativo conectado. Só é possível acessar os objetos de um aplicativo por esta abstração. A abstração é exposta a você como entidades, operações e ações.
- Entidade: uma entidade pode ser considerada um objeto ou um conjunto de propriedades no aplicativo ou serviço conectado. A definição de uma entidade difere de um conector para
outro. Por exemplo, em um conector de banco de dados, as tabelas são as entidades, em um conector de servidor de arquivos, as pastas são as entidades e, em um conector de sistema de mensagens, as filas são as entidades.
No entanto, é possível que um conector não aceite ou não tenha entidades. Nesse caso, a lista
Entities
estará vazia. - Operação: uma operação é a atividade que pode ser realizada em uma entidade. É possível executar
qualquer uma das seguintes operações em uma entidade:
Selecionar uma entidade na lista disponível gera uma lista de operações disponíveis para ela. Para uma descrição detalhada das operações, consulte as operações de entidades da tarefa "Conectores". No entanto, se um conector não oferecer suporte a nenhuma das operações de entidade, essas operações sem suporte não serão listadas na lista
Operations
. - Ação: uma ação é uma função de primeira classe disponibilizada para a integração por meio da interface do conector. Uma ação permite fazer alterações em uma ou mais entidades e varia de um conector para outro. Normalmente, uma ação tem alguns parâmetros de entrada e um de saída. No entanto, é possível que o conector não ofereça suporte a nenhuma ação. Nesse caso, a lista
Actions
estará vazia.
Exemplos de operações de entidade
Esta seção mostra como realizar algumas das operações de entidade neste conector.
Exemplo: extrair um registro de uma tabela
- Na caixa de diálogo
Configure connector task
, clique emEntities
. - Selecione
Table
na listaEntity
. - Selecione a operação
Get
e clique em Concluído. - Defina o ID da entidade como "Get Operation". Para definir o ID da entidade, na seção Data Mapper do Mapeamento de dados, clique em Abrir editor de mapeamento de dados
e digite
row99
no campo Valor de entrada e escolha o EntityId como variável local.
Exemplo: listar todos os registros de uma tabela
- Na caixa de diálogo
Configure connector task
, clique emEntities
. - Selecione
Table
na listaEntity
. - Selecione a operação
List
e clique em Concluído.
Exemplo: criar um registro em uma tabela
- Na caixa de diálogo
Configure connector task
, clique emEntities and select Table2
. - Selecione a operação
Create
e clique em Concluído. - Defina a operação "Criar" para a chave da linha. Para definir a chave de linha, na seção Data Mapper do Mapeamento de dados, clique em Abrir editor de mapeamento de dados e insira
Exemplo: atualizar um registro em uma tabela
- Na caixa de diálogo
Configure connector task
, clique emEntities and select Table
. - Selecione a operação
Update
e clique em Concluído. - Defina o ID da entidade como "Atualizar operação". Para definir o ID da entidade, na seção Data Mapper do Mapeamento de dados,
clique em Abrir editor de mapeamento de dados e insira
no campo Input Value e forneça a chave de linha e o payload para a família de colunas como variável local.
Exemplo: excluir um registro de uma tabela
- Na caixa de diálogo
Configure connector task
, clique emEntities and select Table2
. - Selecione a operação
Delete
e clique em Concluído. - Defina o ID da entidade como "Excluir operação". Para definir o ID da entidade, na seção Data Mapper do Data Mapping, clique em Open Data Mapping Editor e digite
row99
no campo Input Value e escolha EntityId como variável local.
Receber ajuda da comunidade do Google Cloud
Poste suas dúvidas e converse sobre esse conector na comunidade do Google Cloud em Fóruns do Cloud.A seguir
- Entenda como suspender e retomar uma conexão.
- Entenda como monitorar o uso do conector.
- Saiba como acessar os registros do conector.