A empresa procura um Engenheiro de Dados Sênior para atuar em projetos estratégicos.
Descrição do Cargo
O ambiente é multicloud, com foco em AWS e GCP.
* Projetar, implementar e manter pipelines de dados em ambiente multicloud, com foco em AWS e GCP.
* Desenvolver integrações e processamentos de dados utilizando Pyspark e Spark. Orquestrar workflows de dados complexos com Apache Airflow.
* Criar, manter e evoluir pipelines de CI/CD (Jenkins, AWS CodePipeline, Google Cloud Build). Automatizar infraestrutura e recursos de dados com Terraform.
* Desenvolver, containerizar e gerenciar aplicações de dados com Docker e orquestração em Kubernetes.
Habilidades Requeridas
Para o cargo exigimos:
* 6+ anos de experiência em Engenharia de Dados, com forte atuação em nuvem (AWS e GCP).
* Experiência avançada em serviços de dados da AWS (S3, Redshift, EMR, Glue, Lambda, Athena) e da GCP (BigQuery, Dataflow, Pub/Sub, Dataproc).
* Proficiência avançada em Python e experiência comprovada em Pyspark/Spark.
* Experiência com Apache Airflow e forte experiência em CI/CD.
* Sólido conhecimento em Docker e Kubernetes.
* Experiência prática com Terraform.
Benefícios
Nossa equipe oferece uma oportunidade única para trabalhar em projetos desafiadores e desenvolver habilidades em tecnologias de ponta.
Mais Informações
Vivência em projetos com Apache Kafka. Experiência em criar pipelines de dados em tempo real.