Parfois, vous rencontrerez le problème où certains sites Web ne peuvent pas être ouverts dans Octoparse, mais fonctionnent bien dans le navigateur. Cela peut être lié à l'Agent Utilisateur (UA) du navigateur, qui est une chaîne de texte indiquant au site Web cible quel type d'appareil vous utilisez pour accéder à la page. Octoparse propose des UA par défaut que vous pouvez sélectionner, mais parfois ils ne fonctionnent pas. Dans ce tutoriel, nous vous montrerons comment ajouter l'UA de votre navigateur dans Octoparse pour accéder au site Web cible.

Vous devez effectuer 2 étapes pour ajouter un UA personnalisé, que vous pouvez trouver ci-dessous et à droite.

1. Obtenir un UA

Méthode 1 :

Prenons l'exemple du navigateur Chrome (Google). Entrez chrome://version/ dans la barre d'adresse, appuyez sur Entrée, et les informations suivantes apparaîtront. Vous pouvez copier les informations après [User-Agent] et les coller dans Octoparse.

Cependant, certains navigateurs ne prennent pas en charge cette méthode, comme Firefox et Edge. Dans ce cas, vous pouvez utiliser la deuxième méthode ci-dessous, qui est également applicable au navigateur Chrome.

Méthode 2 :

Ouvrez le site web et appuyez sur F12 sur le clavier.

Appuyez sur F12 pour ouvrir la console des outils de développement, ou vous pouvez également faire un clic droit sur la page web et choisir Inspecter pour accéder à la console.

Firefox

Chrome

Actualisez la page web

Cliquez sur l'option Réseau (Network) pour ouvrir l'interface suivante.

Firefox

Chrome

L'onglet Réseau affiche diverses requêtes envoyées par le navigateur.

Cliquez sur l'une des requêtes, puis faites défiler la partie droite pour trouver le User-Agent dans les en-têtes.

Les en-têtes font référence à l'en-tête du message. Vous pouvez trouver les informations sur le User-Agent dans cette partie du contenu. Si des en-têtes de message ne contiennent pas le UA, modifiez la requête et continuez à chercher.