Vaga de Engenheiro de Dados
Estamos procurando por um profissional experiente para atuar como Engenheiro de Dados. Nesta função, você será responsável por construir e otimizar arquiteturas em ambientes cloud, com foco na Google Cloud Platform (GCP).
Responsabilidades:
1. Projetar e implementar Data Lakes e Data Warehouses no ambiente GCP.
2. Extração e integração de dados: extrair dados de sistemas legados (Postgres, Oracle, MySQL, SQLServer, MongoDB) e integrá-los ao GCP utilizando Cloud Storage, DataFlow, Composer, Airflow, CloudSQL e BigQuery.
3. Desenvolver rotinas de tratamento e transformação de dados utilizando Python e Pandas, incluindo manipulação de arquivos Parquet.
4. Realizar consultas e aprimorar eficiência em grandes volumes de dados no BigQuery.
5. Implementar camadas bronze, silver e gold para garantir governança e qualidade dos dados.
6. Contribuir na criação e manutenção de Data Warehouses e relatórios analíticos.