Engenheiro de dados – São Paulo – São Paulo

REGIME: Híbrido em São Paulo (preferencialmente 3x ida ao escritório)

Engenheiro de dados – Sênior

O engenheiro de dados é um engenheiro de software com especialização em dados, seus skills são focados em desenvolvimento de pipelines de ingestão e transformação de dados, deve ser capaz de lidar com dados devendo ter fluência em SQL.

Necessário:

Comunicação eficaz é fundamental em projetos ágeis. Isso inclui a capacidade de transmitir ideias claramente, ouvir ativamente e fornecer feedback construtivo

Boa comunicação, relacionamento interpessoal e trabalho em equipe

Ser capaz de se adaptar rapidamente a novas situações e ajustar planos conforme necessário é uma habilidade valiosa

Raciocínio lógico e capacidade analítica

Implementar soluções de ETL/ELT e integração de dados entre sistemas e fontes de dados diversas

Atuação independente em projetos de dados, desde a identificação das necessidades das áreas pares até a modelagem e disponibilização de dados, mantendo alinhamento constante com stakeholders das áreas de Negócios, Ciências Dados e Engenharia.

Requisitos:

Experiencia em trabalhar em projetos ágeis

Conhecimento no ecossistema Azure.

Experiência básica com Azure DevOps, incluindo trabalho com Repos, branches, Pull requests, tarefas, acompanhamento de pipelines CI/CD e uso de GIT.

Conhecimento em linguagens Python.

Domínio em SQL, incluindo DDL e DML.

Experiência com Azure Data Factory.

Experiência com Azure Databricks, incluindo criação, inicialização e utilização de clusters, uso do Databricks Repos, execução de SQL e desenvolvimento em PySpark.

Utilização de Azure Storage Accounts e Data Lake Store Gen 2.

Experiência em projetos de ingestão e transformação de dados.