Profissional de Dados na Nuvem
Buscamos profissionais habilidosos para desenvolver projetos de dados escaláveis e eficientes na nuvem.
Conhecimentos Técnicos Requisitos
* AWS Glue: criação e manutenção de jobs e catálogos de dados.
* Apache Airflow: orquestração de workflows ETL/ELT e monitoramento de pipelines.
* Python: desenvolvimento de scripts para tratamento de dados.
* PySpark: processamento distribuído de grandes volumes de dados.
* Amazon Athena: criação e otimização de consultas SQL serverless.
* Amazon S3: modelagem de buckets e organização de dados brutos e tratados.
* AWS Lambda: funções serverless para processamento em tempo real.
* Amazon EMR: administração e execução de clusters Hadoop/Spark.
* Git e CI/CD: versionamento de código e integração e entrega contínua.
Habilidades Complementares
* Modelagem de dados: entendimento de estruturas dimensionais e relacionais.
* ETL/ELT: levantamento de requisitos e implementação de fluxos de extração, transformação e carga.
* Boas práticas de segurança e compliance no ecossistema AWS.
* Integração de dados provenientes de múltiplas fontes.
* Monitoramento e observabilidade de pipelines.
Experiência em ambientes multi-conta e multi-região na AWS e conhecimento básico/intermediário de espanhol para interação com times ou clientes hispano-falantes.