Data Engineer

Habilidades Técnicas Essenciais

O candidato ideal deve possuir experiência comprovada nas seguintes áreas e tecnologias:

Experiência comprovada em desenvolvimento de pipelines de dados, especialmente com o Azure Data Factory.

Experiência com ferramentas de orquestração e agendamento de dados (gatilhos do Azure Data Factory, Logic Apps, FiveTran).

Integração com APIs REST, SOAP e OData para ingestão/extração de dados.

Capacidade de trabalhar com dados semiestruturados (JSON, XML, Parquet).

Conhecimento avançado de SQL para transformação e otimização de dados.

Sólidas habilidades em modelagem de dados (diagramas E/R, normalização, chaves primárias/estrangeiras).

Experiência prática com Snowflake (integração, transformação e governança).

Experiência prática com Databricks (integração e transformação).

Sólido conhecimento da infraestrutura do Azure (Blob Storage, Key Vault, Azure SQL, monitoramento, Azure Functions).

Experiência com CI/CD e GitHub Actions (melhores práticas e controle de versão).

Competências Adicionais Desejáveis

Serão considerados diferenciais:

Compreensão de governança, segurança e conformidade de dados (por exemplo, GDPR, criptografia de dados, controle de acesso).

Familiaridade com frameworks de qualidade de dados e estratégias de monitoramento.

Experiência com ajuste de desempenho e otimização de custos em ambientes em nuvem.

Familiaridade com metodologias ágeis e trabalho em equipes multifuncionais.