Descrição do Cargo
O cargo em questão é um papel de destaque para um Engenheiro de Dados Sênior, responsável por atuar em projetos estratégicos na área da Saúde.
O ambiente é multicloud (AWS, GCP e OCI), com foco em AWS e GCP. Buscamos profissionais apaixonados por tecnologia, inovação e que sejam protagonistas na construção de soluções escaláveis, automatizadas e resilientes.
* Projetar, implementar e manter pipelines e arquiteturas de dados em ambiente multicloud (AWS, GCP e OCI), com foco em AWS e GCP;
* Desenvolver integrações e processamentos de dados utilizando Pyspark e Spark;
* Orquestrar workflows de dados complexos com Apache Airflow;
* Criar, manter e evoluir pipelines de CI/CD (Jenkins, AWS CodePipeline, Google Cloud Build, etc.);
* Automatizar infraestrutura e recursos de dados com Terraform;
* Desenvolver, containerizar e gerenciar aplicações de dados com Docker e orquestração em Kubernetes;
Requisitos Obrigatórios:
* 6+ anos de experiência em Engenharia de Dados, com forte atuação em nuvem (AWS e GCP);
* Experiência avançada em serviços de dados da AWS (S3, Redshift, EMR, Glue, Lambda, Athena) e da GCP (BigQuery, Dataflow, Pub/Sub, Dataproc);
* Proficiência avançada em Python e experiência comprovada em Pyspark/Spark;
* Experiência com Apache Airflow (criação e manutenção de DAGs); Forte experiência em CI/CD (Jenkins, AWS CodePipeline, Google Cloud Build ou similares);
* Sólido conhecimento em Docker e Kubernetes; Experiência prática com Terraform para automação de infraestrutura;
* Vivência em projetos com Apache Kafka (integração de dados em tempo real).
Competências Requeridas
Para o sucesso desse projeto, precisamos de um profissional com as seguintes competências:
* Experiência em Engenharia de Dados com foco em nuvem;
* Conhecimento em serviços de dados da AWS e da GCP;
* Proficiência em Python e experiência em Pyspark/Spark;
* Experiência em Apache Airflow e CI/CD;
* Know-how em Docker e Kubernetes;
* Experiência em automação de infraestrutura com Terraform;
Se você é um profissional ambicioso e buscou por uma oportunidade de crescer e aprender, este é o seu momento de destacar-se!