Growth Hackers FR

Salut les growth hackers ! J’ai besoin d’automatiser un scraping qui doit être fait quotidiennement. Des conseils sur les outils ou méthodes à utiliser ?

Salut ! Si tu utilises Scrapy, tu peux configurer un job cron pour lancer ton scraping automatiquement. Sinon, tu peux regarder du côté de Zapier pour automatiser des workflows plus simples.

Oui, Scrapy + cron est une solution robuste. Par contre, si tu veux quelque chose de plus visuel et simple, tu peux utiliser Octoparse qui permet de planifier des scrapings récurrents facilement.

J’ai utilisé Puppeteer pour automatiser des scrapings sur des sites dynamiques. C’est un peu plus technique, mais ça marche très bien. Tu peux aussi le coupler avec un serveur pour le lancer tous les jours.

Merci pour les idées ! Je vais tester Scrapy avec cron pour commencer. Vous avez des ressources pour configurer ça sur un serveur Linux ?