Desenvolvimento de Web Crawling
Fazemos o desenvolvimento de web crawling para a coleta de dados, monitoração dos serviços de produção e evolução da manutenção desses serviços.
Tecnologias utilizadas:
* Desenvolvimento web crawling;
* Python;
* MongoDB;
* Kafka;
* RabbitMQ;
* SQL;
* Parser de HTML;
* JSON;
* PDF.
Responsabilidades:
1. Desenvolver algoritmos de web crawling para a coleta de dados necessários;
2. Monitorar os serviços de produção e identificar eventuais problemas;
3. Evoluir e manter os serviços de coleta, tratamento e agregação dos dados.