Engenheiro de Dados Sênior

Como uma pessoa Engenheira de Dados Sênior na Montreal, você fará parte de uma das melhores empresas de tecnologia do Brasil. Nossa trajetória iniciou há mais de trinta anos com uma pequena equipe de engenharia apaixonada por inovação. Em 1986, pessoas visionárias fizeram um compromisso com a tecnologia e sua capacidade de transformar o mundo. Aquele, seria apenas o começo de uma trajetória que nos tornou referência sólida no mercado e uma das melhores empresas para se trabalhar.

• Conhecimentos em linguagem python, SQL;
• Plataforma Azure para engenharia, Databricks, Datacatalog;
• Notebooks jupyter;
• Trabalho em Equipe: Colaborar com cientistas de dados, analistas de dados, engenheiros de software e outras partes interessadas para garantir que as soluções de dados atendam às necessidades do negócio;
• Extrair dados de diversas fontes como bancos de dados, APIs, arquivos, sensores IoT, entre outros.
• Automatização da Ingestão: Implementar pipelines de dados automatizados para garantir a ingestão contínua e eficiente;
• Projetar esquemas de banco de dados eficientes e otimizados para diferentes tipos de dados (relacionais, NoSQL, etc.);
• Desenvolver processos de Extração, Transformação e Carga (ETL) ou Extração, Carga e Transformação (ELT) para mover e transformar dados entre diferentes sistemas;
• Criar modelos de dados que representem as estruturas de dados e as relações entre elas;
• Documentar modelos de dados, esquemas e fluxos de dados para referência e manutenção;
• Orquestração de Pipelines: Implementar e gerenciar pipelines de dados para garantir que os dados fluam corretamente entre os diferentes componentes do sistema;
• Validação de Dados: Implementar processos para validar a qualidade dos dados em todas as etapas do pipeline;
• Governança de Dados: Estabelecer políticas e procedimentos para garantir a conformidade com regulamentações e melhores práticas de gerenciamento de dados;
• Gerenciar metadados para melhorar a descoberta e a governança dos dados;
• Controle de Acesso: Implementar controles de acesso para proteger dados sensíveis e garantir que apenas usuários autorizados possam acessá-los;
• Criptografia: Usar criptografia para proteger dados em trânsito e em repouso;
• Conformidade Regulatória: Assegurar que todas as práticas de gerenciamento de dados estejam em conformidade com regulamentações como GDPR, HIPAA, etc;
• Provisionamento de Dados: Fornecer dados processados e prontos para análise por cientistas de dados, analistas e outras partes interessadas.
• Relatórios Automatizados: Desenvolver sistemas para gerar relatórios automatizados com base nos dados disponíveis;
• Otimização de Performance: Otimizar consultas e processos para garantir que os sistemas de dados funcionem eficientemente.
• Escalabilidade: Projetar sistemas que possam escalar horizontalmente para lidar com grandes volumes de dados.

• Graduação completa; 
• Data Lake: Configurar e gerenciar data lakes para armazenar grandes volumes de dados brutos e processados.
• ETL/ELT Processes;
• Data Cleaning: Limpar dados para remover inconsistências, duplicações e dados corrompidos;
• Data Enrichment: Enriquecer dados brutos com informações adicionais para torná-los mais úteis;
• Modelagem de Dados;
• Pipeline de Dados;
• Monitoramento e Manutenção: Monitorar e manter pipelines de dados para garantir sua eficiência e identificar e resolver problemas rapidamente;
• Qualidade e Governança de Dados;
• Metadados;
• Segurança e Conformidade de Dados;
• Análise e Relatórios
• Escalabilidade e Desempenho
• Integração de Sistemas: Integrar sistemas de dados com outras ferramentas e plataformas para garantir a interoperabilidade e a continuidade do fluxo de dados.

• Plano de Saúde;
• Plano Odontológico;
• Seguro de Vida;
• Vale-transporte;
• Vale-refeição;
• Total Pass;

Em uma construção contínua, promovemos um ambiente de colaboração, respeito e facilidade. Investimos no desenvolvimento de talentos e na implementação de práticas que otimizam e conectam diferentes aspectos tecnológicos e inovadores.