Na área de dados, é fundamental ter habilidades para trabalhar em equipe, ser colaborativo e corajoso para se desafiar.
Os requisitos essenciais incluem:
* Inglês avançado;
* Experiência em arquitetura de dados;
* Desenvolvimento Python;
* Coleção, transformação e carga de dados (ferramentas de ETL);
* Modelagem de Banco de Dados (SQL, Hadoop, MySQL, Redshift).
Além disso, é necessário desenvolver habilidades em Plataforma AWS, integração de dados com outros sistemas, containers (Docker, ECS, Kubernetes, EKS Openshift), DevOps (Gitlab; Gitlab CI, Puppet) e Cloudformation (Code Build, CodePipeline).
Os softwares necessários incluem:
* API Gateway;
* Kafka;
* AWS Lake Formation;
* AWS Banco de Dados (Redshift, MySQL, Dynam DB,..);
* AWS Athena;
* AWS GLUE (Crawlers, Jobs, workflow);
* AWS Quick Sigth;
* AWS EMR;
* AWS Lambda.