Responsável por Data Engineering em Ambiente AWS
Oportunidade de Carreira:
Uma oportunidade única para profissionais com habilidades avançadas em data engineering, que buscam desafios e oportunidades de crescimento em uma empresa líder no setor.
Habilidades Técnicas Específicas
* AWS Glue: criação e manutenção de jobs, crawlers, catálogos de dados e integração com outros serviços AWS.
* Apollo Airflow: orquestração de workflows ETL/ELT, agendamento e monitoramento de pipelines.
* Python: desenvolvimento de scripts e automações para tratamento e transformação de dados.
* Pyspark: processamento distribuído de grandes volumes de dados, otimização de jobs e tuning de performance.
* Athena: criação e otimização de consultas SQL serverless, integração com S3 e Glue Data Catalog.
* S3: modelagem de buckets, organização de dados brutos e tratados, versionamento e políticas de acesso.
* Lambda: funções serverless para processamento em tempo real, automações e integrações.
* EMR: administração e execução de clusters Hadoop/Spark, configuração de ambientes e pipelines de alto desempenho.
Habilidades Complementares
* Modelagem de Dados: entendimento de estruturas dimensionais, relacionais e não relacionais, normalização/desnormalização e boas práticas para ambientes analíticos.
* ETL/ELT: levantamento de requisitos, desenho e implementação de fluxos de extração, transformação e carga, com foco em qualidade e governança.
* Boas Práticas de Segurança e Compliance no Ecossistema AWS (IAM, KMS, Políticas de Acesso, Criptografia).
* Integração de Dados Provenientes de Múltiplas Fontes (Bancos Relacionais, APIs, Arquivos, Streams).
* Monitoramento e Observabilidade de Pipelines (CloudWatch, Logs, Métricas e Alertas).
* Documentação Técnica Clara e Manutenção de Repositórios de Conhecimento.
Vantagens do Trabalho
Ficarão conhecendo em detalhes o ambiente e as tecnologias utilizadas; Desenvolver habilidades avançadas em tecnologias da área de análise de dados;
Mais Informações
Apos a inscrição sera realizada entrevista online avaliando skills e conhecimentos necessários ao cargo.