Descrição do Cargo
Engenheiro de Dados Senior é um profissional especializado em desenvolver e manter pipelines de dados para a ingestão, limpeza e transformação de dados.
O candidato ideal deve ter conhecimento de DataOps e onpremise. Ele também deve ser uma pessoa hands-on (code) com habilidade para trabalhar em equipe e comunicar-se efetivamente em inglês.
Abaixo estão as responsabilidades principais deste cargo:
* Desenvolver e manter pipelines de dados para a ingestão, limpeza e transformação de dados.
* Coletar, limpar e transformar dados brutos em formatos utilizáveis para análise.
* Modelar e utilizar bancos de dados relacionais (SQL), e data warehouses.
* Colaborar com analistas de dados para fornecer datasets refinados
Aqui estão as habilidades técnicas necessárias:
* Conhecimento em ferramentas de fluxos de dados (Ex: Nifi, Azure Data Factory, AWS Glue ETL).
* Conhecimento em Python e SQL.
* Conhecimento em modelagem de dados.
* Conhecimento em ferramentas de transformação de dados (Ex: dbt, EMR, Databricks).
* Conhecimento em ferramentas de orquestração de pipelines (Ex: Airflow, Azure Data Factory, Degster).
* Proficiência em bancos de dados relacionais (Ex: SQL Server, MySQL, PostgreSQL).
* Capacidade de trabalhar em equipe e comunicar-se efetivamente em inglês.
* Capacidade de aprender e seguir padrões de trabalho (Agile).
* Capacidade de identificar problemas e sugerir soluções.