Conector do Google BigQuery¶

Resumo¶

O Harmony Google BigQuery Connector estabelece acesso ao Google BigQuery.

O conector do Google BigQuery fornece uma interface para criar uma conexão do Google BigQuery, a base usada para gerar instâncias de atividades do Google BigQuery. Essas atividades, uma vez configuradas, interagem com o Google BigQuery por meio da conexão.

O conector do Google BigQuery é acessado na aba Conexões da paleta de componentes de design (consulte Paleta de Componentes de Design).

Visão Geral do Conector¶

Este conector é usado para configurar primeiro uma conexão do Google BigQuery. Os tipos de atividades associados a essa conexão são então usados para criar instâncias de atividades que se destinam a serem usadas como origens (para fornecer dados em uma operação) ou destinos (para consumir dados em uma operação).

Juntos, uma conexão específica do Google BigQuery e suas atividades são chamadas de endpoint do Google BigQuery:

• Transferência de dados: Transfere dados de uma fonte de dados para um conjunto de dados no Google BigQuery e deve ser usado como destino em uma operação.

• Invocar Rotina: Invoca uma rotina (como um procedimento armazenado, uma função definida pelo usuário ou uma função de tabela) para um conjunto de dados no Google BigQuery e deve ser usado como destino em uma operação.

• Consulta: Consulta uma tabela em um conjunto de dados no Google BigQuery e destina-se a ser usado como origem em uma operação.

• Inserir registro: Insere registros em uma tabela no Google BigQuery e deve ser usado como destino em uma operação.

• Criar Estrutura: Cria conjuntos de dados ou tabelas no Google BigQuery e deve ser usado como destino em uma operação.

• Estrutura de atualização: Atualiza estruturas no Google BigQuery e deve ser usado como destino em uma operação.

• Atualizar registro: Atualiza registros em um conjunto de dados no Google BigQuery e deve ser usado como destino em uma operação.

• Excluir estrutura: Exclui estruturas do Google BigQuery e deve ser usado como destino em uma operação.

• Executar consulta personalizada: Executa consultas personalizadas em tabelas em conjuntos de dados no Google BigQuery e deve ser usado como origem em uma operação.

Pré-requisitos e Versões de API Suportadas¶

O conector do Google BigQuery requer o uso de uma versão do agente 10.1 ou mais tarde. Essas versões do agente baixam automaticamente a versão mais recente do conector quando necessário.

O conector do Google BigQuery usa o Google SDK versão 25.4.0. Consulte a documentação do SDK para obter informações sobre os nós e campos do esquema.

Para usar o conector do Google BigQuery, você deve ter uma conta de serviço do Google para seu projeto com as permissões apropriadas definidas e determinadas credenciais obtidas da conta de serviço (conforme descrito em Pré-requisitos do Google BigQuery).

Solução de Problemas¶

Se você tiver problemas com o conector do Google BigQuery, recomendamos estas etapas de solução de problemas:

1. Clique no botão Testar na configuração da conexão para garantir que a conexão seja bem-sucedida e garantir que a versão mais recente do conector seja baixada para o agente (a menos que você use a Desativar atualização automática do conector política da organização).

2. Verifique os logs de operação para qualquer informação escrita durante a execução da operação.

3. Habilite o registro de depurar de operação (para Agentes em Nuvem ou para Agentes Privados) para gerar arquivos de log e dados adicionais.

4. Se estiver usando Agentes Privados, você pode ativar registro detalhado do conector para este conector usando esta entrada de configuração específica de nome e nível do criador de logs:

   <logger name="org.jitterbit.connector.google.bigquery" level="DEBUG"/>
   

5. Se estiver usando Agentes Privados, você pode verificar os logs do agente Para maiores informações.