Vaga de Engenheiro(a) de Dados Sênior Remoto
No contexto atual da tecnologia, a procura por profissionais habilidosos em engenharia de dados tem aumentado significativamente. O cargo de Engenheiro(a) de Dados Sênior Remoto é uma oportunidade para indivíduos desenvolverem suas habilidades e contribuírem para o crescimento de organizações no setor.
Descrição do Cargo:
O Engenheiro(a) de Dados Sênior é responsável por projetar e otimizar pipelines ETL/ELT de alta performance para ingestão e análise de dados OSINT. Além disso, ele/ela deve criar fluxos de enriquecimento com NLP, tradução automática, NER e resolução de entidades, processar grandes volumes de dados com Apache Spark, Delta Lake e Databricks, gerenciar soluções de dados no Azure, implementar observabilidade, qualidade e linhagem de dados com ferramentas como Great Expectations, Monte Carlo e Unity Catalog, e melhorar o desempenho de consultas e estratégias de particionamento em ambientes analíticos baseados em nuvem.
Requisitos Essenciais:
* Inglês em nível avançado (C1);
* Experiência com engenharia de dados, processamento de big data e soluções em nuvem;
* Conhecimento avançado em serviços Azure, como Databricks, Synapse Analytics, Data Lake Storage (ADLS) e Azure Functions;
* Dominio de Apache Spark, PySpark e Scala para processamento de dados em larga escala;
* Familiaridade com arquiteturas Lakehouse, Delta Lake e modelos de dados em camadas (Medallion);
* Sólido entendimento de frameworks ETL/ELT, data warehousing e estratégias de evolução de esquemas;
* Proficiência em SQL, NoSQL e bancos de dados de grafos (ex: PostgreSQL, Cosmos DB, Neo4j, Redis);
* Vivência com conteinerização e orquestração usando Docker, Kubernetes e Helm;
* Conhecimento em frameworks de processamento de fluxo, como Apache Flink, ksqlDB ou Apache Beam;
* Experiência com práticas de segurança de dados, incluindo RBAC, ABAC e criptografia;
* Dominio da linguagem Python e boas práticas de testes com PyTest ou ferramentas similares.
Requisitos Adicionais:
* Inglês nível C2;
* Conhecimento em sistemas de informação geoespacial;
* Experiência com pipelines de machine learning utilizando MLflow ou Kubeflow (MLOps);
* Noções de análise de grafos e links aplicadas a fluxos de inteligência.
Benefícios:
Além das oportunidades de carreira, o cargo oferece benefícios variados, incluindo vale alimentação ou vale refeição Ifood Empresas, benefício indireto, desconto em cursos, universidades e instituições de idiomas, academia Sys Manager e outros.
],