Mantenha tudo organizado com as coleções
Salve e categorize o conteúdo com base nas suas preferências.
O Dataflow é baseado no projeto de código aberto Apache Beam. Você pode usar o SDK do Apache Beam para criar pipelines para o Dataflow.
Neste documento, listamos alguns recursos para começar a usar a programação do Apache Beam.
Instalar o SDK do Apache Beam:
mostra como instalar o SDK do Apache Beam para executar pipelines
no serviço do Dataflow.
Tour do Apache Beam:
um guia de aprendizado para se familiarizar com o Apache Beam.
As unidades de aprendizagem são acompanhadas por exemplos de código que você pode executar e modificar.
Apache Beam Playground: um ambiente interativo para testar transformações e exemplos do Apache Beam sem precisar instalar o Apache Beam no seu ambiente.
No site do Apache Beam, também é possível encontrar informações sobre como projetar, criar e testar o pipeline:
Projetar o pipeline: mostra como determinar a estrutura do pipeline, como escolher as transformações que serão aplicadas aos dados e como determinar os métodos de entrada e de saída.
Criar o pipeline:
explica a mecânica de uso das classes nos SDKs do Apache Beam e as
etapas necessárias para criar um pipeline.
Testar o pipeline:
apresenta as práticas recomendadas para testar os pipelines.
Use os seguintes exemplos do GitHub do Apache Beam para começar
a criar um pipeline de streaming:
[[["Fácil de entender","easyToUnderstand","thumb-up"],["Meu problema foi resolvido","solvedMyProblem","thumb-up"],["Outro","otherUp","thumb-up"]],[["Difícil de entender","hardToUnderstand","thumb-down"],["Informações incorretas ou exemplo de código","incorrectInformationOrSampleCode","thumb-down"],["Não contém as informações/amostras de que eu preciso","missingTheInformationSamplesINeed","thumb-down"],["Problema na tradução","translationIssue","thumb-down"],["Outro","otherDown","thumb-down"]],["Última atualização 2025-03-24 UTC."],[[["Dataflow utilizes the open-source Apache Beam project, allowing users to construct pipelines with the Apache Beam SDK."],["Resources are provided for installing the Apache Beam SDK, guiding users on how to run their pipelines within the Dataflow service."],["The Apache Beam website offers resources covering pipeline design, creation, and testing best practices, using the classes in the Apache Beam SDK."],["The Apache Beam playground offers an interactive environment to try out the Apache Beam transforms without needing to install Apache Beam."],["Example streaming pipelines, including word extraction, word count, and wordcap, are available on the Apache Beam GitHub repository in Java, Python, and Go."]]],[]]
