Engenheiro de Dados
Responsibilities and assignments
Analisar os requisitos identificados e priorizados pelo negócio;
Desenvolver, testar e manter os processos de ingestão de dados de acordo com os padrões de arquitetura da instituição;
Desenvolver, testar e manter os processos de tratamento e armazenamento de dados de acordo com os padrões de arquitetura da instituição;
Construir e manter webcrawlers, webscrapings e robôs na linguagem Python;
Extrair bases de dados e padronizar informações, organizando o banco de dados;
Identificar maneiras de melhorar a confiabilidade, a eficiência e a qualidade dos dados;
Preparar dados para modelagem preditiva e prescritiva;
Modelagem de Dados Relacional e Dimensional;
Desenvolvimento e orquestração de pipeline de dados para o Data Lake;
Extração, armazenamento e processamento de dados;
Integração de dados via APIs;
Manutenção dos processos para correção de falhas/erros;
Implementação de melhorias.
Requirements and qualifications
Formação Acadêmica
Graduação completa em Ciência da Computação, Matemática, Estatística, Economia, Engenharias ou áreas correlatas.
Experiência Profissional
Uso de Cloud, para componentes e serviços relacionados a dados (Azure Data Factory, Databricks, Azure DevOps entre outros);
Desenvolvimento de processos robustos e estruturados de carga, normalização e padronização de rotinas e dados;
Atuação como Engenheiro de Dados com foco em negócio, apoiando na criação de ambientes analíticos e geração de documentação;
Desenvolvimento de soluções de Engenharia de Dados utilizando componentes de dados Azure e Databricks.
Conhecimentos Específicos
Conhecimento técnico de infraestruturas de dados (bancos de dados relacionais, não relacionais, etc.), Datawarehouse, Lakehouse e Big Data;
Linguagem SQL avançada;
Python e suas respectivas bibliotecas para engenharia de dados;
Spark;
Metodologias ágeis (Scrum, Kanban);
Utilização e construção de API’s.
[Desejáveis] Formações, Conhecimentos e/ou Experiências
Conhecimento em Power BI Service.
Additional information
Informações de contratação:
Contrato de trabalho por tempo indeterminado – CLT.
Trabalho presencial no escritório da CNI, em Brasília/DF.
Horário das 9h às 18h, 40h semanais, com banco de horas.
Nossos principais benefícios:
Ambulatório Médico
Auxílio-Creche
Auxílio Filho com Deficiência
Plano de Saúde (Abrangência Nacional)
Plano de Previdência Privada
Plano Odontológico
Programa de Treinamento e Desenvolvimento
Programa Qualidade de Vida
Reembolso de Próteses e Órteses Ortopédicas
Seguro de Vida
Serviço de Apoio Psicossocial, Financeiro e Jurídico
Vale-Alimentação e/ou Refeição
Vale-Transporte
