Estamos em busca de um profissional habilidoso e experiente para exercer o cargo de Engenheiro(a) de Dados Sênior.
Nossa empresa, especializada na área de tecnologia, está crescendo rapidamente e precisamos de alguém com conhecimento avançado em engenharia de dados, processamento de big data e soluções em nuvem.
Requisitos Essenciais:
* Inglês em nível avançado (C1);
* Experiência com Apache Spark, PySpark e Scala para processamento de dados em larga escala;
* Conhecimento avançado em serviços Azure, como Databricks, Synapse Analytics, Data Lake Storage (ADLS) e Azure Functions;
* Domínio de arquiteturas Lakehouse, Delta Lake e modelos de dados em camadas;
* Proficiência em SQL, NoSQL e bancos de dados de grafos;
* Vivência com conteinerização e orquestração usando Docker, Kubernetes e Helm;
* Experiência com práticas de segurança de dados, incluindo RBAC, ABAC e criptografia;
* Domínio da linguagem Python e boas práticas de testes.
Responsabilidades:
* Projetar e otimizar pipelines ETL/ELT de alta performance para ingestão e análise de dados OSINT;
* Criar fluxos de enriquecimento com NLP, tradução automática, NER e resolução de entidades;
* Processar grandes volumes de dados com Apache Spark, Delta Lake e Databricks;
* Gerenciar soluções de dados no Azure;
* Implementar observabilidade, qualidade e linhagem de dados;
* Trabalhar em conjunto com times DevOps para CI/CD de pipelines;
* Aplicar diretrizes de segurança para proteção e governança dos dados;
* Construir integrações via APIs GraphQL, REST ou gRPC com serviços internos e externos.
Benefícios:
Vale Alimentação ou Vale Refeição Ifood Empresas;
Benefiício indireto (valor fixo para custeio parcial do plano de saúde ou somado ao vale alimentação);
Desconto em cursos, universidades e instituições de idiomas;
Auxílio Creche;
Assistência Médica;
Assistência Odontológica;
Convênio para Pet;
TotalPass
Day Off após 12 meses;
Seguro de vida e outros.