Profissional experiente em projetos escaláveis e eficientes no ecossistema AWS.
Técnicas:
* AWS Glue: criação e manutenção de jobs, crawlers e catálogos de dados.
* Apache Airflow: orquestração de workflows ETL/ELT, agendamento e monitoramento de pipelines.
* Python: desenvolvimento de scripts para tratamento e transformação de dados.
* PySpark: processamento distribuído de grandes volumes de dados.
* Athena: criação e otimização de consultas SQL serverless.
* S3: modelagem de buckets e organização de dados brutos e tratados.
* Lambda: funções serverless para processamento em tempo real.
* EMR: administração de clusters Hadoop/Spark e configuração de ambientes.
Habilidades Complementares:
* Modelagem de dados: entendimento de estruturas dimensionais e relacionais.
* ETL/ELT: levantamento de requisitos e desenho de fluxos de extração e carga.
* Boas práticas de segurança e compliance no ecossistema AWS.
* Integração de dados provenientes de múltiplas fontes.
* Monitoramento e observabilidade de pipelines.
Descrição da Vaga:
Buscamos profissionais experientes em projetos escaláveis e eficientes no ecossistema AWS. Você terá a oportunidade de trabalhar em projetos importantes e contribuir para o sucesso da nossa equipe.
Requisitos:
• Conhecimento avançado em AWS Glue, Apache Airflow, Python, PySpark, Athena, S3, Lambda e EMR.
• Experiência em projetos de dados escaláveis e eficientes.
• Boas práticas de segurança e compliance no ecossistema AWS.
Benefícios:
• Oportunidade de trabalho em projetos importantes e contribuir para o sucesso da nossa equipe.
• Ambiente de trabalho colaborativo e apoiador.
• Aprender e crescer com a empresa.
Outras Informações:
• Não há benefícios adicionais a serem mencionados.