Screaming Frog 403 Forbidden Error (erreur interdite)

Il peut être très frustrant d'essayer d'explorer un site web et de voir soudain apparaître la mention délai d'attente ou erreur 403 Forbidden message. Que faites-vous lorsque vous rencontrez les messages on-page les plus courants sur votre écran : erreurs de code d'état HTTP, mauvaises requêtes, erreurs internes du serveur ou erreurs de réponse HTTP "pas de réponse" ? Comment pouvez-vous y remédier ? Dans cet article de blog, nous expliquerons l'erreur 403 Forbidden et fournirons quelques solutions pour la résoudre. Restez à l'écoute !

grenouille hurlante
Isaac Adams-Hands - Screaming Frog 403 Forbidden Error (erreur interdite)

Qu'est-ce qu'une erreur 403 Forbidden ?

Le code d'état 403 Forbidden est une erreur côté serveur qui indique que le fichier serveur refuse de répondre à la demande. Cela peut être dû à plusieurs raisons, notamment : la demande est faite pour une ressource qui n'existe pas, l'utilisateur n'a pas les permissions suffisantes pour accéder à la ressource demandée ou le serveur est configuré pour bloc à partir de l'adresse IP de l'utilisateur.

Quelle qu'en soit la raison, une erreur 403 Forbidden empêchera l'utilisateur d'accéder à l'information demandée. ressource. Dans certains cas, le serveur peut fournir une redirection vers une autre page ou ressource accessible ; dans d'autres cas, l'utilisateur devra contacter le propriétaire ou l'administrateur du site web pour résoudre le problème. Quoi qu'il en soit, une erreur 403 Forbidden est une source de frustration pour tous les utilisateurs de sites web. utilisateur qui la rencontre.

Comment réparer l'erreur de code d'état interdit 403 dans Screaming Frog ?

  1. La page ne sort pas

    ouvrir dans le navigateur

    Cause plausible 1 : La demande est faite pour une ressource qui n'existe pas

    Vous devrez vérifier que la page Web existe. Vous pouvez le faire en ouvrant l'URL dans votre navigateur.

    Ce test vous montrera si la page web est accessible à partir du navigateur.

  2. Authentification requise

    Authentification requise

    Cause plausible 2 : L'utilisateur ne dispose pas des autorisations suffisantes pour accéder à la ressource demandée.

    Dans certains cas, la page est protégée par un mot de passe. Vous devrez saisir le nom d'utilisateur et le mot de passe dans la fenêtre modale de Screaming Frog pour qu'elle puisse explorer cette page.

  3. Le serveur vous bloque

    cloudflare bloqueur de bots

    Cause plausible 3 : Le serveur est configuré pour bloquer les requêtes provenant de l'ordinateur de l'utilisateur. Adresse IP.

    Si la page Web peut être affichée sur votre ordinateur à l'aide d'un navigateur, cela signifie que le site Web bloque le robot (crawler) et qu'il s'agit d'un événement isolé.

  4. Réduction de la vitesse de rampement

    vitesse lente

    Solution 1 : L'araignée est peut-être configurée pour ramper trop vite et trop agressivement.

    Pour remédier aux analyses agressives, vous devez réduire le taux d'exploration :

    Configuration >> Vitesse >> Configuration de la vitesse de l'araignée

    En réduisant votre taux d'exploration, vous augmenterez le temps nécessaire à l'exécution des analyses et réduirez la charge des ressources du serveur.

  5. Modifier l'agent utilisateur

    agent utilisateur

    Solution 2 : Si le site Web bloque le Screaming Frog Crawler, modifiez le paramètre User-Agent dans Screaming Frog.

    Configuration >> User-Agent >> Agents utilisateurs actuels

    Certains serveurs sont configurés pour bloquer tout ce qui n'est pas un GoogleBot.

  6. Changez votre IP

    développeur

    Solution 3 : Changez votre adresse IP

    Le serveur peut bloquer votre adresse IP, il est donc préférable d'essayer le crawl à partir d'un autre fournisseur de services Internet.

    Si vous êtes au travail et que vous souhaitez changer d'adresse IP, essayez de le faire depuis chez vous. Si vous êtes à la maison, essayez un café avec une bonne connexion Internet. Si vous ne pouvez pas partir, essayez de connecter votre ordinateur à votre téléphone. En changeant d'endroit, vous pourrez déterminer si votre adresse IP est bloquée.

  7. Mettez votre IP sur une liste blanche

    fail2ban

    Solution 4 : Mettre votre adresse IP sur la liste blanche du serveur ou du site web.

    Dans la mesure du possible, vous pouvez mettre votre adresse IP sur une liste blanche auprès du site web, du serveur ou du serveur DNS.

    Les options sont infinies, mais quelques services de sécurité bloquant votre crawl pourraient l'être : Wordfence, CloudFlareet Fail2Ban; si vous n'êtes pas au courant de l'existence d'un logiciel de sécurité En cours d'exécution, il est préférable de consulter votre service informatique.

Conclusion

Rencontrer une erreur 403 Forbidden lors de l'utilisation de Screaming Frog SEO Spider peut être un obstacle frustrant dans la poursuite de l'optimisation des performances d'un site web. 

Cependant, en comprenant les causes et les solutions, il est possible de résoudre efficacement ce problème. En s'attaquant à des facteurs potentiels tels que des pages inexistantes, des exigences d'authentification, des restrictions de serveur et des problèmes d'accès à l'Internet, il est possible de résoudre le problème. ramper les utilisateurs peuvent dépanner et résoudre cette erreur de manière efficace. 

En outre, la mise en œuvre de stratégies telles que la modification de l'agent utilisateur, de l'adresse IP ou de la liste blanche peut atténuer davantage ces obstacles. En exploitant les fonctionnalités de Screaming Frog, les utilisateurs peuvent améliorer leurs efforts de référencement technique, en garantissant des expériences de crawling plus fluides et en facilitant le processus d'optimisation. 

N'oubliez pas de vérifier les configurations internes, les fichiers robots.txt, les liens brisés et d'utiliser des balises méta telles que canonical et nofollow pour améliorer la visibilité sur les moteurs de recherche. En restant informés et proactifs dans la gestion des erreurs clients telles que le code d'état 403 Forbidden, les webmasters peuvent surmonter les défis techniques et favoriser une présence en ligne plus optimisée et plus facilement accessible. 

Pour des conseils plus détaillés sur la résolution des problèmes techniques de référencement, explorez les ressources disponibles sur screamingfrog.co.uk et utilisez des outils tels que l'onglet Response Codes dans l'interface de Screaming Frog. Avec de la diligence et une mise en œuvre stratégique des solutions, les utilisateurs peuvent surmonter les obstacles et propulser leurs sites Web vers une plus grande visibilité et un plus grand succès dans le paysage numérique.

N'hésitez pas à nous contacter si vous n'arrivez toujours pas à résoudre l'erreur 403 Forbidden. Nous nous ferons un plaisir de vous aider !

FAQ

  • Combien de personnes peuvent utiliser la licence Grenouille Hurlante ?

Publié le : 2022-09-01
Mise à jour le : 2024-04-10

Avatar pour Isaac Adams-Hands

Isaac Adams-Hands

Isaac Adams-Hands est le directeur du référencement chez SEO North, une entreprise qui fournit des services d'optimisation des moteurs de recherche. En tant que professionnel du référencement, Isaac possède une expertise considérable en matière de référencement sur page, de référencement hors page et de référencement technique, ce qui lui donne une longueur d'avance sur la concurrence.
fr_FRFrench