Engenheiro de Dados
Aqui você terá a oportunidade de contribuir para o desenvolvimento de soluções inovadoras em tecnologia, garantindo estabilidade e escalabilidade das plataformas.
* O engenheiro de dados será responsável por liderar a evolução da arquitetura e apoiar o time na construção de uma operação previsível, automatizada e de alta qualidade.
As principais responsabilidades incluem:
* Dominar arquitetura e engenharia de dados, incluindo Airflow, Airbyte, Spark/PySpark, EMR, EKS/Kubernetes, S3/Lake, Redshift, BigQuery e DataFlow.
* Tirar proveito de pipelines de dados de alta criticidade, focando modularização, automação e confiabilidade.
* Mantener boas práticas de versionamento e desenvolvimento: Git, ambientes DEV/STG/PRD, CI/CD, testes e Data Quality.
* Ajudar a governar Data Lakes e Data Warehouses, garantindo reutilização de camadas e evitando duplicidades.
* Traduzir regras de negócios complexas em soluções técnicas claras, robustas e escaláveis.
* Auxiliar como referência técnica, incluindo mentoria e apoio a times de engenharia.
Para este cargo, é necessário ter habilidades em:
* Ingestão e Orquestração: Airflow, Airbyte, Lambdas, DataFlow, Scheduled Queries.
* Processamento Distribuído: PySpark, Spark SQL, EMR, Dataproc, DLT (desejável).
* Nuvem: AWS (EKS, EMR, Lambda, S3, Redshift), GCP (BigQuery, DataFlow, Composer).
* Infra as Code & DevOps: Terraform, Docker, Kubernetes, CI/CD.
* Data Quality & Linhagem: Great Expectations, DataHub ou similares.
* Governança & Segurança: IAM, VPN, segregação de ambientes.
Aqui estão alguns dos benefícios de trabalhar com nossa equipe:
* Oportunidade de crescer profissionalmente.
* Ambiente de trabalho colaborativo e diverso.
* Acesso a ferramentas e recursos de ponta.