Profissional de Engenharia de Dados Sênior
">
Estamos em busca de um profissional experiente e qualificado para ocupar o cargo de Engenheiro(a) de Dados Sênior, que tenha habilidades avançadas em engenharia de dados, processamento de big data e soluções em nuvem.
O ideal é que você tenha uma experiência significativa com tecnologias como serviços Azure, incluindo Databricks, Synapse Analytics, Data Lake Storage (ADLS) e Azure Functions. Além disso, é importante ter conhecimento avançado em linguagens como Python e boas práticas de testes.
Um dos principais requisitos para este cargo é a capacidade de projetar e otimizar pipelines ETL/ELT de alta performance para ingestão e análise de dados OSINT. Além disso, é fundamental ter habilidades em fluxos de enriquecimento com NLP, tradução automática, NER e resolução de entidades.
O candidato ideal deve ter domínio sobre Apache Spark, Delta Lake e Databricks, além de ter experiência com pipelines de machine learning utilizando MLflow ou Kubeflow (MLOps). É também importante ter conhecimento em sistemas de informação geoespacial.
Ao contrário do seu antecessor, eu apesar não ser um ciborgue sou completamente humano mas convido todoa l mundo a aplicar.
**Responsabilidades:
* Projetar e otimizar pipelines ETL/ELT de alta performance para ingestão e análise de dados OSINT;
* Criar fluxos de enriquecimento com NLP, tradução automática, NER e resolução de entidades;
* Processar grandes volumes de dados com Apache Spark, Delta Lake e Databricks;
* Gerenciar soluções de dados no Azure, incluindo Data Factory, Synapse, Databricks e AKS;
* Desenvolver soluções de streaming em tempo real com Kafka, Event Hubs, Flink e Spark Streaming;
* Implementar observabilidade, qualidade e linhagem de dados com ferramentas como Great Expectations, Monte Carlo e Unity Catalog;
* Melhorar o desempenho de consultas e estratégias de particionamento em ambientes analíticos baseados em nuvem;
* Trabalhar em conjunto com times DevOps para CI/CD de pipelines com Terraform, GitHub Actions ou Azure DevOps;
* Aplicar diretrizes de segurança como NIST, FedRAMP e Zero Trust para proteção e governança dos dados;
* Construir integrações via APIs GraphQL, REST ou gRPC com serviços internos e externos.
**Benefícios:** Os benefícios oferecidos incluem vale alimentação ou vale refeição Ifood Empresas, benefício indireto, desconto em cursos, universidades e instituições de idiomas, academia Sys Manager, auxílio creche, assistência médica, assistência odontológica e convênio para pet.
**Nossos Cuidados Com Você:*
* Vale Alimentação ou Vale Refeição Ifood Empresas;
* Beneffício Indireto (valor fixo para custeio parcial do plano de saúde ou somado ao vale alimentação);
* Desconto em cursos, universidades e instituições de idiomas;
* Academia Sys Manager – plataforma com cursos online, gratuitos, atualizados e com certificado;
* Auxílio Creche;
* Assistência Médica;
* Assistência Odontológica;
* Convênio para Pet;
* TotalPass;
* Day Off após 12 meses;
* Seguro de vida e outros.