Documentação do Dataproc

Leia a documentação do produto

Com o Dataproc, um serviço Apache Spark e Hadoop gerenciado, você pode usar ferramentas de dados de código aberto para processamento em lote, consultas, streaming e machine learning. A automação do Dataproc ajuda a criar clusters rapidamente, gerenciá-los com facilidade e economizar dinheiro desativando os clusters quando não são necessários. Com menos tempo e dinheiro gastos com administração, você pode se concentrar nos jobs e dados. Saiba mais

Comece a usar gratuitamente
  • Acessar o Gemini 2.0 Flash Thinking
  • Uso mensal gratuito de produtos conhecidos, incluindo APIs de IA e BigQuery
  • Sem cobranças automáticas, sem compromisso
Confira ofertas de produtos sem custos financeiros

Continue explorando com mais de 20 produtos sempre gratuitos

Acesse mais de 20 produtos gratuitos para casos de uso comuns, incluindo APIs de IA, VMs, data warehouses e muito mais.

Recursos de documentação

Encontre guias de início rápido, consulte referências de chaves e receba ajuda para problemas comuns.
Conheça o treinamento autoguiado do Google Cloud Ensina, os casos de uso, as arquiteturas de referência e os exemplos de código com exemplos de como usar e conectar Google Cloud serviços.
Treinamento
Treinamento e tutoriais

Executar um job do Spark no Google Kubernetes Engine

Envie jobs do Spark para um cluster do Google Kubernetes Engine em execução na API Dataproc Jobs.

Saiba mais
Treinamento
Treinamento e tutoriais

Introdução ao Cloud Dataproc: Hadoop e Spark no Google Cloud

Este curso apresenta uma combinação de palestras, demonstrações e laboratórios práticos para criar um cluster do Dataproc, enviar um job do Spark e, em seguida, encerrar o cluster.

Saiba mais
Treinamento
Treinamento e tutoriais

Machine learning com Spark no Dataproc

Este curso apresenta uma combinação de palestras, demonstrações e laboratórios práticos para implementar a regressão logística usando uma biblioteca de machine learning do Apache Spark em um cluster do Dataproc para desenvolver um modelo com dados de um conjunto de dados multivariável.

Saiba mais
Caso de uso
Casos de uso

Soluções de programação de fluxo de trabalho

Programe fluxos de trabalho no Google Cloud.

Saiba mais
Caso de uso
Casos de uso

Como migrar dados do HDFS do local para o Google Cloud

Como mover dados do Hadoop Distributed File System (HDFS) para o Google Cloud.

Saiba mais
Caso de uso
Casos de uso

Gerenciar dependências Java e Scala para o Apache Spark

Abordagens recomendadas para incluir dependências ao enviar um job do Spark para um cluster do Dataproc.

Saiba mais
Exemplo de código
Exemplos de código

Amostras da API Python

Chamar APIs do Dataproc a partir do Python.

Abrir o GitHub  
Exemplo de código
Exemplos de código

Amostras da API Java

Chame APIs do Dataproc do Java.

Abrir o GitHub  
Exemplo de código
Exemplos de código

Amostras da API Node.js

Chame APIs do Dataproc a partir do Node.js.

Abrir o GitHub  
Exemplo de código
Exemplos de código

Amostras da API Go

Chame APIs do Dataproc do Go.

Abrir o GitHub  

Vídeos relacionados