Passer au contenu principal

Que dois-je faire si ma tâche est lente ?

Mis à jour il y a plus de 2 ans

Nous vous proposons de télécharger la nouvelle version pour découvrir les fonctionsles plus puissantes. Contactez lea@otoparse.com ou support@octoparse.com pour obtenir un code promo pour votre première commande.


Situation 1 : Trop d'étapes dans le flux de travail

Solution 1: Simplifiez votre tâche

Le flux de travail peut parfois être trop compliqué et comporter de nombreuses étapes pour atteindre la page cible. Il est donc essentiel de simplifier votre flux en supprimant certaines étapes inutiles telles que les actions de clic. Vous devrez utiliser l'URL de la couche la plus proche afin de rendre votre tâche beaucoup plus simple et directe.

Par exemple, si vous souhaitez extraire des lunettes 3D d'Amazon. Vous voudrez éviter la situation suivante, qui consiste à cliquer sur les articles couche par couche pour atteindre la page de produit des lunettes 3D.

99.png

Vous devrez utiliser directement l'URL de la page produit du verre 3D pour commencer votre tâche.

98.png

Solution 2: Divisez votre tâche

Lorsque votre tâche consiste à cliquer sur une liste d'éléments pour en obtenir les données, vous pouvez essayer de la diviser en deux.

  • Tâche 1 : Obtenir l'URL de chaque entrée à partir de la page d'inscription.

  • Tâche 2 : Utilisez la liste des URL extraites de la première étape pour configurer une nouvelle tâche pour les données de la page de détail.


Situation 2 : Le site web utilise AJAX mais vous ne l'avez pas configuré.

Solution: Définir une heure AJAX appropriée

97.png

Situation 3: L'environnement local n'est pas bon (exécution locale)

Solution 1: Améliorer l'environnement local

Si l'extraction locale fonctionne assez lentement, cela est probablement dû à l'environnement local, comme le système d'exploitation, la capacité du matériel, l'adresse IP, la largeur de bande du réseau, les performances de l'unité centrale, etc. Vous devrez vérifier manuellement l'état actuel de tous les facteurs connexes énumérés ci-dessus.

Solution 2: Exécuter des tâches dans le Cloud (utilisateurs premium uniquement)

Cependant, il est tout à fait compréhensible que ces types de problèmes soient moins susceptibles d'être réglés ou résolus. Cependant, l'exécution des tâches dans le Cloud sera plus efficace et plus réalisable pour vous permettre de profiter d'une extraction de données plus rapide avec Octoparse.


Situation 4 : Le contenu du site web peut mettre plus de temps à être entièrement chargé.

Solution: Désactiver le chargement des images

  • Accéder aux paramètres de la tâche

96.png
  • Cochez la case Désactiver le chargement des images et cliquez sur Enregistrer

95.png

Remarque : la désactivation du chargement des images peut parfois entraîner un échec du chargement de la page. Si vous constatez que la tâche ne fonctionne pas correctement après l'avoir sélectionnée, veuillez annuler cette option.

Avez-vous trouvé la réponse à votre question ?