Data Engineer – São Paulo

A Daki nasceu para revolucionar o delivery de mercado. O que antes alguém recebia em horas ou dias, agora recebe em minutos! Mais que entregar rápido, buscamos entregar uma experiência incrível para os nossos clientes. Buscamos aquele “UAU” de quando o cliente recebe muito antes do que esperava. E tudo começa muito antes da montagem do pedido, na verdade, começa bem aqui. Estamos buscando uma pessoa Engenheira de Dados habilidosa e motivada para se juntar à nossa equipe dinâmica. Como Pessoa Engenheira de Dados, você desempenhará um papel crucial no projeto, desenvolvimento e manutenção da infraestrutura e dos fluxos de dados que impulsionam os processos de tomada de decisão baseados em dados de nossa organização. Você colaborará com equipes multidisciplinares, incluindo cientistas de dados, analistas e engenheiros de software, para garantir o fluxo contínuo de dados provenientes de várias fontes, possibilitando o processamento, transformação, armazenamento e recuperação eficientes dos dados. Responsabilidades: 1. Desenvolvimento de Fluxos de Dados: – Projetar, desenvolver e manter fluxos de dados escaláveis e confiáveis para coleta, processamento e transformação de dados de diversas fontes, incluindo bancos de dados, APIs e serviços externos. – Implementar processos ETL (Extração, Transformação, Carga) para garantir a precisão e consistência dos dados em diferentes sistemas. – Otimizar os fluxos de dados em termos de desempenho, eficiência e qualidade dos dados. 2. Modelagem e Arquitetura de Dados: – Colaborar com arquitetos de dados e partes interessadas para projetar e implementar modelos de dados que atendam aos requisitos comerciais e às necessidades analíticas. – Garantir a adequada particionamento de dados, indexação e design de esquema para consultas e relatórios eficientes. – Avaliar e integrar novas tecnologias e ferramentas de dados para aprimorar a infraestrutura de dados. 3. Qualidade e Governança de Dados: – Implementar verificações de qualidade de dados e mecanismos de monitoramento para identificar e resolver anomalias e problemas nos dados. – Aplicar políticas de governança e segurança de dados para manter a integridade dos dados e conformidade com regulamentações do setor. 4. Integração de Dados: – Integrar fontes de dados de terceiros nos fluxos de dados e sistemas existentes, garantindo compatibilidade e consistência. – Desenvolver e manter fluxos de trabalho de integração de dados para facilitar a troca de dados entre sistemas internos e externos. 5. Otimização de Desempenho: – Identificar e resolver gargalos de desempenho no processamento e armazenamento de dados, otimizando a infraestrutura geral de engenharia de dados. – Monitorar e solucionar falhas nos fluxos de dados, garantindo uma resolução rápida para minimizar interrupções. 6. Colaboração e Documentação: – Trabalhar em estreita colaboração com cientistas de dados, analistas e outras partes interessadas para entender os requisitos de dados e fornecer o suporte necessário de engenharia de dados. – Documentar fluxos de dados, processos e melhores práticas para garantir a compartilhamento de conhecimento e manutenção do código. Qualificações: – Graduação em Ciência da Computação, Engenharia ou área relacionada (desejável). – Experiência comprovada como Engenheiro de Dados ou função similar, com um histórico sólido de projeto e implementação de fluxos de dados complexos. – Proficiência em linguagens de programação como Python e SQL. – Conhecimentos com ferramentas e tecnologias de integração de dados (por exemplo, Apache Spark, Apache Kafka, frameworks ETL). – Sólido entendimento de bancos de dados relacionais e NoSQL, conceitos de data warehousing e técnicas de modelagem de dados. – Familiaridade com plataformas de nuvem – Google Cloud) e orquestradores como Apache Airflow (GCP Cloud Composer) – Habilidades sólid

Número de vagas: 1

Tipo de contrato e Jornada: Efetivo – CLT – Período Integral

Área Profissional: Especialista em Informática, TI, Telecomunicações – Processamento de Dados