Proposta de Desenvolvimento de Pipeline de Dados
O candidato irá projetar, desenvolver e implementar pipelines robustos, conectando dados de diversas fontes utilizando principalmente ferramentas do ecossistema AWS.
* Implementar soluções de enriquecimento de dados escaláveis e eficientes utilizando o DBT para transformar dados brutos em modelos de dados personalizados e insights acionáveis para o negócio;
* Gerenciar integrações, processos de transformação e automações de tarefas usando conectores de dados, APIs SQL, Python e Rest;
* Utilizar SQL para consultas e manipulação de dados em bancos de dados relacionais e não relacionais; e
* Abrir processamento de grandes volumes de dados em tempo real e em batch com Spark.
-----------------------------------
Requisitos Fundamentais:
Os candidatos devem possuir conhecimentos avançados em:
* Ferramentas AWS, incluindo S3, Lambda, EC2, RDS e Redshift;
* Ferramentas de processamento de dados, como DBT, Airflow, Apache Beam e Apache Spark;
* Técnicas de análise de dados e modelagem estatística;
* Estruturação de dados e princípios de boas práticas de desenvolvimento de software.
-----------------------------------
Benefícios:
Nossa empresa oferece uma cultura inovadora e flexível, permitindo que nossos funcionários trabalhem de forma remota. Além disso, oferecemos acesso a recursos avançados de treinamento e desenvolvimento profissional, ajudando os funcionários a alcançar seus objetivos de carreira.
-----------------------------------
Ambiente de Trabalho:
Nossa equipe é composta por profissionais experientes e apaixonados pela tecnologia. Nós valorizamos a colaboração, a criatividade e a inovação. O ambiente de trabalho é dinâmico e estimula o crescimento profissional.