Fundamentos de data warehouses - curso 44.500 rublos. do IBS Training Center, treinamento 24 horas, data 26 de novembro de 2023.
Miscelânea / / November 30, 2023
Durante o curso, você se familiarizará com os conceitos básicos e desafios que surgem na criação de data warehouses. Compreender como os objetivos influenciam a escolha da arquitetura e quais as consequências que podem resultar da atenção insuficiente aos componentes. Tenha uma ideia dos papéis e da influência dos membros da equipe no resultado. O programa do curso descreverá abordagens práticas para o projeto e implementação de data warehouses e seus componentes. Você examinará o gerenciamento do ciclo de vida, incluindo o descomissionamento e a migração para novos sistemas, e cobrirá tópicos de gerenciamento de dados e construção de serviços baseados nele. Na parte prática os alunos serão divididos em duas equipes: uma das equipes trabalhará em um projeto de migração de armazenamento dados levando em consideração os objetivos estratégicos de desenvolvimento da empresa, e o segundo irá avaliá-los em termos de capacidades, recursos e prazos.
Assuntos abordados:
1. Introdução (teoria + prática 2,5 horas).
O conceito de “armazenamento de dados”. Suas capacidades e limitações
Por que o DWH foi criado, que problema de negócios ele resolve?
2. Componentes e arquitetura (teoria + prática 3 horas).
Abordagens clássicas para design de data warehouse
Componentes e processos típicos envolvidos
Conceitos de Inmon, Kimball e DataVault
Visão geral dos principais componentes (estágio, ods, dds, datamart, bi, metadados) e processos (ETL, ELT, DQ, linhagem)
3. Gestão de dados - Governança de Dados (teoria + prática 2 horas).
Questões gerais e específicas de gerenciamento de dados corporativos
A informação é vista como um ativo que agrega valor e tem custos para ser obtida.
O conceito de “dados mestres” e sistemas para sua gestão - MDM
4. Técnicas de design de armazenamento (teoria + prática 5 horas).
Etapas de design de armazenamento
Técnicas e ferramentas típicas para criar
Experiência dos participantes e infraestrutura
5. Área de armazenamento de dados fonte - Estágio (teoria + prática 3 horas).
A necessidade de armazenar dados brutos do sistema de origem
Erros típicos na organização desta área e sua diferença de um “data lake”
6. Áreas de armazenamento permanente - ODS e DDS (teoria + prática 3 horas).
Camadas de armazenamento de dados operacionais e multidimensionais
Processos de extração, purificação, controle e preservação - ETL\ELT
Transformação para esquema de armazenamento de destino
7. Sistemas consumidores de dados de armazenamento (teoria + prática 3,5 horas).
Cenários típicos para usar dados de armazenamentos
Principais consumidores - sistemas de business intelligence “BI”
A estrutura de um sistema típico de BI e as razões de sua grande variedade
8. Novos desafios no desenvolvimento de data warehouses (teoria + prática 2 horas).
Uma visão geral dos principais desafios que as instalações de armazenamento enfrentam à medida que crescem
Novos desafios em aprendizado de máquina
O conceito Data Mesh como alternativa para maior desenvolvimento.