Cursos com tag "Engenharia de Dados"
Filtros
Resultados
Get Started with Databricks for Data Engineering
Neste curso, você aprenderá habilidades básicas que permitirão que você use a Databricks Data Intelligence Platform para executar um fluxo de trabalho simples de engenharia de dados e dar suporte a empreendimentos de data warehousing. Você fará um tour pelo workspace e aprenderá a trabalhar com objetos em Databricks como catálogos, esquemas, volumes, tabelas, clusters de compute e Notebooks. Em seguida, você seguirá um fluxo de trabalho básico de engenharia de dados para executar tarefas como criar e trabalhar com tabelas, ingerir dados em Delta Lake, transformar dados por meio da arquitetura medallion e usar Databricks Workflows para orquestrar tarefas de engenharia de dados. Você também aprenderá como a Databricks dá suporte às necessidades de data warehousing por meio do uso de Databricks SQL, Pipelines Declarativos do Lakeflow e Unity Catalog.
DevOps Essentials for Data Engineering
Este curso explora as melhores práticas de engenharia de software e os princípios de DevOps, projetados especificamente para engenheiros de dados que trabalham com Databricks. Os participantes construirão uma base sólida em tópicos-chave, como qualidade de código, controle de versão, documentação e testes. O curso enfatiza o DevOps, abordando os principais componentes, os benefícios e o papel da continuous integration e delivery (CI/CD) na otimização dos fluxos de trabalho de engenharia de dados.
Databricks Streaming and Lakeflow Spark Declarative Pipelines
Este curso oferece uma compreensão abrangente do Spark Structured Streaming e do Delta Lake, incluindo modelos de compute, configuração para leitura de dados em tempo real e manutenção da qualidade dos dados num ambiente de transmissão.
Data Ingestion with Delta Lake
Este curso prepara profissionais de dados para utilizar a plataforma de inteligência do Databricks e produzir pipelines de ETL. Os alunos usarão Delta Live Tables com Spark SQL e Python para definir e programar pipelines que processam incrementalmente novos dados de uma variedade de fontes de dados no Lakehouse. Os alunos também orquestrarão tarefas com Databricks Workflows e promoverão código com Databricks Repos.
Build Data Pipelines with Lakeflow Declarative Pipelines
Este curso apresenta aos usuários os conceitos e habilidades essenciais necessários para criar pipelines de dados usando pipelines declarativos do Lakeflow em Databricks para ingestão e processamento incrementais em lote ou transmissão por meio de várias streaming tables e materialized views. Projetado para engenheiros de dados novos em pipelines declarativos Lakeflow, o curso fornece uma visão geral abrangente dos principais componentes, como processamento incremental de dados, streaming tables, materialized views e views temporárias, destacando suas finalidades e diferenças específicas.