problème bash avec wget erreur 403 ForbiddenRésolu/Fermé

Question

Bonjour,

Je cherche une location d'appartement en urgence et je passe mon temps à scruter s'il n'y a pas de nouvelles annonces pour avoir des chances de pouvoir obtenir une visite dans les premiers.
Je cherche donc à faire un script bash avec wget afin de m'envoyer un mail s'il détecte dans le résultat un/plusieurs mots clés synonyme d'une nouvelle annonce mise en ligne
Le problème c'est que même en modifiant le user agent, je n'ai pas les droits :

 $ wget "https://www.leboncoin.fr/" --user-agent="Mozilla/5.0 (X11; Ubuntu; Linux x86_64; rv:26.0) Gecko/20100101 Firefox/26.0"--2022-06-11 18:07:16--  https://www.leboncoin.fr/                                                                                                                             Résolution de www.leboncoin.fr (www.leboncoin.fr)… 18.66.2.50, 18.66.2.12, 18.66.2.54, ...                                                                                     Connexion à www.leboncoin.fr (www.leboncoin.fr)|18.66.2.50|:443… connecté.                                                                                                     requête HTTP transmise, en attente de la réponse… 403 Forbidden                                                                                                                2022-06-11 18:07:17 erreur 403 : Forbidden.  

Pourriez-vous m'aider SVP !!!!
Merci !!!!

mamiemando · Answer

Bonjour,

L'application sur smartphone ne fait-elle pas déjà ce que tu veux (jamais utilisé personnellement, mais je commencerais par là) ? Voir ce lien et ce lien.

Sinon, ce fil de discussion propose un script python qui permettrait de scraper leboncoin. En effet wget  ne permet de télécharger directement la page (je te laisse lire le lien précédent qui explique pourquoi).

Bonne chance

sectario · Answer

Salut Mamiemando,

Avant tout merci pour ta réponse.
En fait avec le bon coin que reçois un mail à 6H58 reprenant les annonces des dernières 24H, autant dire que je ne suis pas le 1er prévenu ! Sinon j'ai vérifié et mes notifications push sont bien activées.
J'ai fais une MAJ de l'application, à suivre !
Sinon pour le fil de discussion proposé, j'ai l'impression que l'automatisation totale ne fonctionne pas (obligé d'ouvrir manuellement et accepter les cookies)
J'espère que l'appli va mieux fonctionner avec la MAJ !
Bonne journée à toi et encore merci

mamiemando · Answer

Bonjour,

Sinon pour le fil de discussion proposé, j'ai l'impression que l'automatisation totale ne fonctionne pas (obligé d'ouvrir manuellement et accepter les cookies)

Une approche à la selenium devrait faire l'affaire. Le lien que j'ai donné dans mon message précédent propose d'utiliser une alternative basée sur playwright (que, contrairement à selenium, je n'ai jamais testée). L'as tu testée ?

Bonne chance

sectario · Answer

Salut !

Je ne parviens même pas à trouver le paquet playwright , je suis sous raspbian  :

  uname -aLinux RASP99 4.19.42-v7+ #1219 SMP Tue May 14 21:20:58 BST 2019 armv7l GNU/Linuxapt install playwrightLecture des listes de paquets... FaitConstruction de l'arbre des dépendancesLecture des informations d'état... FaitE: Impossible de trouver le paquet playwright

ça s'annonce mal ? lol

mamiemando · Answer

Bonjour,

playwright ne semble effectivement pas disponible via apt. La procédure d'installation est décrite ici (il faut au préalable installer npm : sudo apt install npm).

Sinon, tu peux sans doute adapter l'approche proposée avec selenium, qui lui est disponible via apt (personnellement c'est ce que j'utilise).

Bonne chance

sectario · Answer

Salut mamiemando,

Bon en fait la MAJ de l'appication a dû régler le problème puisque je reçois bien les notifications en fait.
Bon je n'ai ceci dit pas encore trouver de location mais j'y crois !

En te remerciant vivement.

Problème bash avec wget erreur 403 Forbidden

6 réponses

Discussions similaires

Newsletters