A Tech For TI está com oportunidade para Engenheiro de Dados Sênior, para atuar em projeto de cliente AutoTech, focada no mercado B2B, presente em diversos países.
Requisitos imprescindíveis: - Relevante experiência como Engenheiro (a) de Dados ou posição similar, atuando em ambientes de grande escala.
- Domínio em Google Cloud Platform (GCP), incluindo ferramentas como BigQuery, Dataflow, Cloud Storage, Pub/Sub etc.
- Conhecimentos avançado em Apache Airflow, com experiência em orquestração de pipelines em batch e streaming;
- Proficiência em SQL e NoSQL (ex: MongoDB, Cassandra, Redis), com forte capacidade de modelagem e manipulação de grandes volumes de dados;
- Domínio em Python, voltado para automação, integração e transformação de dados;
- Vivência com Docker e Kubernetes, aplicados a ambientes de dados;
- Capacidade analítica e visão estratégica para otimizar fluxos e processos com foco em performance e escalabilidade;
- Proatividade e autonomia para identificar melhorias e propor soluções técnicas inovadoras.
Principais Atividades:
- Projetar, desenvolver e manter pipelines de dados escaláveis na Google Cloud Platform (GCP), com foco em performance, segurança e custo-benefício;
- Construir pipelines de ETL/ELT orquestrados com Apache Airflow, garantindo automação, rastreabilidade e eficiência.
- Escrever e manter scripts em Python para integração, transformação e automação de dados;
- Trabalhar com bancos de dados SQL e NoSQL (estruturados e semi-estruturados), aplicando boas práticas de modelagem e otimização de consultas;
- Garantir a qualidade, integridade e segurança dos dados em todas as etapas do pipeline;
- Colaborar com times de tecnologia e negócio para diagnosticar problemas, propor melhorias e implementar soluções inovadoras;
- Monitorar a saúde dos pipelines com alertas, logs e dashboards, garantindo a confiabilidade dos dados;
- Apoiar a governança de dados, implementando boas práticas e padrões consistentes;
- Participar da evolução contínua da arquitetura de dados, propondo melhorias de infraestrutura, fluxo e escalabilidade.