O trabalho de Engenheiro(a) de Dados Sênior envolve projetar e construir pipelines de dados robustos e escaláveis, focados em dados de logística.
Para isso, você trabalhará com diversas ferramentas e tecnologias, incluindo Airflow, BigQuery, Parquet e Python. Você precisará desenvolver scripts e ferramentas para extrair, transformar e carregar dados relevantes para a análise da oferta de frete e conformidade regulatória.
Responsabilidades:
1. Projetar e construir pipelines de dados robustos e escaláveis.
2. Desenvolver e otimizar consultas e transformações de dados em BigQuery.
3. Trabalhar com diversos formatos de dados logísticos, incluindo a otimização para o formato Parquet.
4. Desenvolver scripts e ferramentas em Python para extrair, transformar e carregar dados relevantes.
5. Criar e manter dashboards e visualizações informativas em Looker Studio.
6. Colaborar com as áreas de Logística, Compliance e outros times para entender as necessidades de dados e fornecer soluções que otimizem a oferta de frete e garantam a conformidade com as regulamentações.
Para ter sucesso nessa posição, você precisará de experiência prática com BigQuery, conhecimento em trabalhar com o formato de dados Parquet e proficiência em programação em Python.