Engenheiro de Dados – Aracaju

Projetar, desenvolver e implementar soluções de engenharia de dados eficientes e escaláveis;Colaborar com equipes multifuncionais para entender requisitos e garantir a entrega de soluções de alta qualidade;Conhecimento de esteira de CI/CD seguindo as diretrizes da empresa para automação e entrega contínua;Conhecimento de git para versionamento das soluções;Desenvolver e otimizar jobs Spark (PySpark) para processamento eficiente de grandes volumes de dados;Trabalhar com Tabela Delta para garantir consistência e confiabilidade nos dados;Desenvolver Web Crawlers para coleta e processamento de dados da web;Configurar e manter fluxos de trabalho de dados utilizando Apache Airflow; Informações adicionais: {nivel: Não Informado}