ResponsabilidadesDesenvolver, manter e otimizar pipelines de dados utilizando PySpark.Automatizar e gerenciar processos de ingestão, transformação e disponibilização de dados.Implementar práticas de versionamento e integração contínua com Azure DevOps.Monitorar a performance das cargas de dados e atuar proativamente na resolução de problemas.Garantir a governança, segurança e qualidade dos dados ao longo de todo o ciclo de vida.Requisitos ObrigatóriosExperiência prática com PySpark (manipulação e transformação de dados em larga escala).Experiência com Azure DevOps (CI/CD, versionamento de código, automação de pipelines).Conhecimentos Desejáveis (não Obrigatórios)Linguagens de programação: Python, SQL, Scala.Orquestração de pipelines com ferramentas como Apache Airflow, Azure Data Factory ou similares.Armazenamento e processamento de dados em nuvem: Azure, AWS ou GCP.Modelagem de dados (conceitual, lógica e física).Experiência com bancos de dados relacionais (PostgreSQL, SQL Server) e não-relacionais (MongoDB, Cassandra).Conhecimento em Data Lakes, Data Warehouses e arquitetura orientada a dados.Familiaridade com ferramentas de versionamento além do Azure DevOps, como Git/GitHub.Práticas de DataOps, DevOps e CI/CD aplicadas a pipelines de dados.Monitoramento e observabilidade com ferramentas como Datadog, Prometheus, Grafana, entre outras.A vaga aceita trabalho remoto?NãoAnalista Pleno de Dados e Planejamento - Mercado EnviosAnalista de Dados de Experiência do Cliente - PEEngenheiro (a) de Dados Júnior | Recife-PE6428 - Analista de Governança de Dados PlenoAnalista de Dados – Pleno e Sênior | DataViz & Cloud | Inglês AvançadoPessoa Analista de Desenvolvimento de Sistemas IIAnalista de Banco de Dados Sênior (Oracle)Visagio Talentos - Estágio: Engenheiro(a) de Dados NEEngenheiro de Dados - Trabalho Remoto | REF#259078Jaboatão dos Guararapes, Pernambuco, Brazil 6 months agoEngenheiro de Dados GCP – Júnior | Pleno | Sênior
#J-18808-Ljbffr