Perfis de Dados Senior
Desenvolver e otimizar consultas SQL e jobs PySpark, garantindo a performance e otimização de custos computacionais;
Criar e manter pipelines de dados eficientes e escaláveis, garantindo a integridade e qualidade dos dados;
Implementar e monitorar processos de ingestão, transformação e disponibilização de dados;
Trabalhar com grandes conjuntos de dados em ambientes distribuídos, aplicando boas práticas de particionamento, cache e tuning de jobs.
**Requisitos e Qualificações**
A AWS Core inclui:
* EC2: Tipos de instância, auto scaling, AMIs, EBS, rightsizing, Spot Instances.
* S3: Classes de armazenamento (Standard, IA, Glacier), políticas de ciclo de vida, versionamento, replicação, custo por operação.
* CloudWatch: Monitoramento de uso e criação de alarmes para consumo atípico.
* Cost Explorer / AWS Budgets: Análise de custos, tagging, e relatórios de utilização.
* Trusted Advisor: Uso para recomendações de economia.
Otimização e FinOps
Inclui:
* Rightsizing: Identificação de superprovisionamento e sugestões com base em métricas.
* Savings Plans e Reserved Instances: Cálculo de economia e viabilidade de contratação.
* Spot Instances: Estratégias para workloads tolerantes a interrupção.
* Análise de gráficos de utilização de CPU, memória e rede para EC2.
* Aplicação de políticas de ciclo de vida e armazenamento inteligente no S3.
Data Engineering / Infraestrutura
Requer conhecimento básico de clusters e conceitos de slots, pods, nós e tuning de recursos em orquestradores, além de familiaridade com serviços de ingestão/transporte de dados como Glue, Lambda, DMS e Kinesis.
**Benefícios**
Oferecemos uma variedade de benefícios, incluindo vale alimentação/refeição flexível, total pass, vittude, plano saúde subsidiado, plano dental, seguro de vida, participação nos lucros e resultados, bônus anual, desconto em cursos de idioma, parceria nível avançado com a AWS e muito mais.
**Outras Informações**
O contrato é feito na modalidade 100% home office, com um dia a dia descontraído e acolhedor. Além disso, oferecemos plano de carreira e acompanhamento individual, programas internos de compartilhamento de conhecimento e valorizamos a diversidade, liberdade, flexibilidade e autonomia.