351 210 124 743 info@gades-solutions.com

Fundamentos de Engenharia de Dados com Python e SQL

Formato: Online via Cisco Webex

Data

A Anunciar

Horário

8 Sessões – 19h às 21h
Duração: 16h 

Formato

Online via Cisco Webex

> Todas as gravações das sessões serão disponibilizadas

Preço

265€

Descrição

Este curso destina-se a participantes que pretendam adquirir conhecimentos na área da Engenharia de Dados.

A necessidade de profissionais que desenvolvam sistemas de dados nunca foi tão elevada, considerando um futuro que será, cada vez mais, movido a dados. Este curso procura auxiliar os seus participantes a compreender o caminho certo na direção de uma carreira na Engenharia de Dados.

Visão Geral

Este curso proporciona uma base sólida em Engenharia de Dados e alguns conceitos, ferramentas e técnicas essenciais para os seus participantes. Através das várias sessões e com a realização de exercícios práticos, os participantes irão ganhar experiência e insights nas seguintes áreas:

– Principais responsabilidades de um engenheiro de dados e a importância da engenharia de dados nos dias de hoje;
– Compreender as principais plataformas,  incluindo o processo de pipeline de dados, a estratégia de extração, transformação e carregamento, o paradigma do data warehouse e o príncipio do data lake;
– Explorar a aplicação de competências úteis na modelação, design e manuseamento e manipulação de dados;
– Criar e executar processos ETL para transferência automática de dados e fornecer soluções para decisões informadas e fundamentadas. 

Objetivos

No final do curso, pretende-se que os participantes sejam capazes de:

– Definir o que é a Engenharia de Dados
– Recapitular informações-chave sobre a estrutura e armazenamento de dados
– Construir programas nativos associados ao trabalho de engenharia de dados
– Desenvolver e implementar programas para agregar e mover os dados para os formatos e locais necessários
– Discutir a importância de ter uma boa estrutura ETL, que se ajuste às necessidades dos dados da empresa
– Descrever as diferentes estruturas para processamento de dados em lote (batch data) ou em fluxo (stream data)
– Projetar e modelar sistemas de gestão de bases de dados para o nível ótimo (optimum level)
– Utilizar as melhores ferramentas de software para projetar e criar pipelines de dados
– Garantir a qualidade, gestão e controlo sobre os dados.

A quem se destina

Este curso destina-se a:

– Aspirantes a Engenheiros de Dados 
– Candidatos que pretendam trabalhar em Engenharia de Dados 
– Engenheiros de dados que pretendam  alavancar os seus conhecimentos ou outras pessoas interessadas na profissão de Engenharia de Dados
– Negócios orientados por dados e gestores de pequenas empresas que poderão descobrir como incorporar conhecimentos de Engenharia de Dados no seu negócio. 

Formador

Pedro Ferreira

Engenheiro de Dados com 7 anos de experiência, trabalho  em diversos setores e organizações, desde start-ups a empresas cotadas na Bolsa de Valores de Nova Iorque. Apaixonado por dados e o seu potencial transformativo, o Pedro foca-se em auxiliar as empresas a alavancar os seus dados para melhorar a satisfação do consumidor e impulsionar o crescimento de receita. Desenvolveu expertise na estruturação e otimização de sistemas de dados, que permitam às empresas extrair insgihts valiosos das vastas quantidades de dados gerados através das suas operações.

Recursos disponibilizados

– Certificado GADES Solutions e DGERT *
– Gravações das Sessões do Curso
– Slides e material demonstrado no decorrer do curso, em formato digital

(*) Para efeitos de emissão de certificado, será solicitado o preenchimento/assinatura dos seguintes documentos: Ficha de Inscrição e Contrato de Formação

Programa

1. Introducção à Engenharia de Dados 

– Os dados como um ativo estratégico para organizações
– Os perfis de dados

• Engenharia de Dados versus BI Developer versus Cientista de Dados
• Arquitetura de Dados e Soluções de Armazenamento
• OLTP versus Data Warehousing

– O problema da ingestão e integração dos dados
–  Estudo de Caso: Data Warehousing no Mundo Moderno

2. Ingestão de Dados, Processos ETL/ELT e Frameworks de Processamento

– Ingestão de Dados e Processos de ETL/ELT
– Data Pipeline Orchestration
– Frameworks de Processamento de Dados

• Batch processing vs. stream processing
• Fundamentos de Apache Kafka

– Workshop: Construir a primeira pipeline

3. Modelação de Dados, Projeção de Bases de Dados e Pipeline Orchestration

– Modelação de Dados e Projeção de Bases de Dados
– Modelação Dimensional

• Star schema
• Snowflake
• Data Vault

– Dimensões e Hierarquias
– Tipos de Métricas
– Workshop: Do Star Schema ao Excel com Google BigQuery

 4. Construção de Soluções de Dados Escaláveis 

– SQL Avançado para melhores pipelines

• Common table expressions
• Window Functions

– Modelação de dados com dbt
– Workshop: Construir o primeiro pipeline

5. Qualidade dos Dados, Data Governance, Segurança, Aplicações no Mundo Real e Tendências Futuras

– Qualidade dos Dados, Data Governance e Segurança
– Visão Geral das Ferramentas e Tecnologias

• Data Quality controls with dbt
• Data Governance with Google Dataplex

– Workshop: Incorporar qualidade de dados nos pipelines
– Conclusão do Curso e Tendências Futuras

Rácio: 50% Teoria | 50% Prático

Preço

265€ (Isento de IVA)

Data e horário

A Anunciar

Pré-Requisitos

– Familiaridade e conhecimentos básicos, a nível do utilizador, dos produtos da família Microsoft e/ou MAC

Formato

ONLINE 
A formação será realizada online, em tempo real, através da plataforma Cisco Webex.

Inscrição

Escolha uma das seguintes opções:

Fale connosco

gades solutions

Rua Ferreira de Castro nº19

2635-361, Sintra, Portugal

Telefone: 210 124 743

Telemóvel: 932 027 860

Email: info@gades-solutions.com

Inscrição

Por favor, introduza os seus dados. Entraremos em contacto brevemente.

13 + 6 =

Utilizaremos os seus dados para informar acerca de produtos ou serviços da GADES Solutions. Para mais informações, por favor consulte a nossa Política de Privacidade

 

COPYRIGHT © 2019 • GADES SOLUTIONS • TODOS OS DIREITOS RESERVADOS