Crawler de marketplaces
25/07/2024 às 16:56Descrição do Projeto:
No fim, preciso ter:
- Nome do produto
- Nome do fabricante
- Preço
- Informações extras disponíveis do produto, que podem variar por e-commerce.
- Data de coleta
- URL do produto
- URL da imagem do produto
A entrega deve consistir em:
- Usar bibliotecas estabelecidas para o crawler (Scrapy, Puppeteer, Cheerio, etc.)
- Código do crawler
- Docker para rodar o crawler
- O crawler deve reportar erros e sucessos
- O crawler deve reportar o tempo de execução (páginas por segundo)
- O crawler deve mostrar o que está sendo coletado
- O crawler deve implementar mecanismos para lidar com erros, começar de onde parou, etc.
- Estrutura de configuração do banco de dados (SQLite ou PGSQL) se necessário, ou deve gerar um arquivo JSON com o resultado de cada coleta
- Deve implementar algum mecanismo como cache para reduzir chamadas desnecessárias e melhorar a performance.
Atividades do cliente nesse projeto:
Última visualização: 02/09/2024 às 17:14
Última interação: 19/08/2024 às 15:58
Informações adicionais
| Categoria: | Web, Mobile & Software |
|---|---|
| Subcategoria: | Outra - Web, Mobile & Software |
| Orçamento: | Aberto |
| Nível de experiência: | Iniciante |
| Visibilidade: | Público |
| Propostas: | 5 |
| Propostas excluídas: | 1 |
| Interessados: | 11 |
| Valor Mínimo: | R$ 50,00 |
-
Submetido: | Oferta: Privado | Duração estimada: Privado
-
Submetido: | Oferta: Privado | Duração estimada: Privado
-
Submetido: | Oferta: Privado | Duração estimada: Privado
-
Submetido: | Oferta: Privado | Duração estimada: Privado
Robô para entradas automáticas em Bac Bo a partir de sinais de grupo - Preciso de um robô que entre em um grupo de sinais de Bac Bo e faça entradas automáticas a partir dos disparos do grupo. O robô deverá permitir que eu defina o stop...
Programa para cálculo de fechamento 3 de 4 com redução e reposição - Quero um programa para rodar números. Exemplo: tenho de 1 a 10. A ideia é dividir sempre por 4: - 1 a 3 - 4 a 6 - 7 a 8 - 9 a 10 Agora quero aplicar o fechamento matemático 3...
Bot de vendas para gestão de grupos VIP no Telegram - Tenho um canal exclusivo no Telegram e quero saber a possibilidade e o preço de criar um bot similar ao Fusion (https://t.me/gerenciador_grupos_vip_bot) ou com a mesma dashboard do PinkBot (...
Configurar bot de moderação para servidor Discord - Estou finalizando a criação de um servidor no Discord. Falta apenas a parte de moderação (bot). Gostaria de alguém para configurar o bot no servidor. Não &...
Bot de vendas para gestão de grupos VIP no Telegram - Tenho um canal exclusivo no Telegram e quero saber a possibilidade e o preço de criar um bot similar ao Fusion (https://t.me/gerenciador_grupos_vip_bot) ou com a mesma dashboard do PinkBot (...
