**Desenvolver pipelines de dados escaláveis e eficientes é uma das principais responsabilidades da posição de Consultor(a) AWS SR**.
A equipe busca um profissional experiente em projetos de dados com sólida capacidade em trabalhar com o ecossistema AWS. O ideal é que tenha habilidades avançadas em Python, Pyspark, Athena, Lambda e EMR, além de conhecimento básico/intermediário em espanhol para interação com times ou clientes hispano-falantes.
**Requisitos Técnicos:**
* Criação e manutenção de jobs crawlers catálogos de dados integração com outros serviços AWS utilizando a AWS Glue;
* Orquestração de workflows ETL/ELT agendamento e monitoramento de pipelines com Apache Airflow;
* Desenvolvimento de scripts e automações para tratamento e transformação de dados em Python;
* Processamento distribuído de grandes volumes de dados otimização de jobs tuning de performance com Pyspark;
* Criação e otimização de consultas SQL serverless integração com S3 e Glue Data Catalog utilizando a Athena;
* Modelagem de buckets organização de dados brutos e tratados versionamento e políticas de acesso em S3;
* Funções serverless para processamento em tempo real automações e integrações com Lambda;
* Administração e execução de clusters Hadoop/Spark configuração de ambientes e pipelines de alto desempenho com EMR;
* Versionamento de código integração e entrega contínua configuração de pipelines de deploy com Git e CI/CD;
**Habilidades Complementares:**
* Modelagem de dados entendimento de estruturas dimensionais relacionais e não relacionais normalização/desnormalização boas práticas para ambientes analíticos;
* ETL/ELT levantamento de requisitos desenho e implementação de fluxos de extração transformação e carga com foco em qualidade e governança;
* Boas práticas de segurança e compliance no ecossistema AWS IAM KMS políticas de acesso criptografia;
* Integração de dados provenientes de múltiplas fontes bancos relacionais APIs arquivos streams;
* Monitoramento e observabilidade de pipelines CloudWatch logs métricas e alertas;
* Documentação técnica clara manutenção de repositórios de conhecimento;
**Diferenciais:**
* Experiência com ambientes multi-conta e multi-região na AWS;
* Familiaridade com infraestrutura como código CloudFormation Terraform ou CDK;
* Experiência em otimização de custos em workloads de dados na nuvem;
**Informações Adicionais:**
* Contratação CLT;
* Atuação remota;
* Projeto temporário de 6 meses;