J'ai dans l'idée de me lancé un défi pour apprendre à scrapper ( voir créer un programme ).
Je connais mieux JS que python donc je pense à pupeeteer, mais si les fonctionalités pré existante sont plus facile a prendre en main alors je partirai sur python.
L'idée du post c'est d'avoir des avis sur les différences que l'on peut rencontrer entre pupeeteer, beautifoulsoup et scrapy.
Avoir des retour sur les projet que vous avez réalisé avec une de ces technologie ( ou que vous aimeriez réaliser )
Voici mon projet :
Scrapper des citation depuis un site Web avec citation/auteur/tag ( connaissez vous un site Web a scrapper pour récupérer ce genre de donnée )
Les (re)classer dans un tableau CSV et une base de donné.
Ensuite créer une liste d'image de fond.
A chaque tag placer une image de fond différente
Copier la citation et l'auteur sur les image créer
Cerise sur le gâteau créer un sélecteur qui publie cette image sur insta.
Je me demande si c'est possible a faire en full JS.
Si ça serait plus facile a faire en Python ( meilleur communauté, technologie avec plus d'expérience etc ... )
PS si vous connaissez des discord, Slack ou les utilisateurs fasse ce genre de projet je suis preneur.
Merci
Seul on va plus vite, ensemble on va plus loin. 'KawaBunga'
Normalement avec puppeteer ça devrait être possible sans trop de problème.
Je ne l'ai jamais fait personnellement, mon usage de puppeteer se limitant à la création de fichier pdf sur une base html/css stocker en local sur un serveur.
Mais juste en lisant ce post, tu as déjà le principe de base pour ton projet.
Des utilisateur de puppeteer ou scrappeur python
× Après avoir cliqué sur "Répondre" vous serez invité à vous connecter pour que votre message soit publié.
× Attention, ce sujet est très ancien. Le déterrer n'est pas forcément approprié. Nous te conseillons de créer un nouveau sujet pour poser ta question.
Seul on va plus vite, ensemble on va plus loin. 'KawaBunga'