¿Cómo puede identificar y corregir las URL no indexables en Screaming Frog SEO Spider?

Para arreglar URLs no indexables usando Screaming Frog SEO Spider, primero debe rastrear su sitio para identificar estas URLs. Mire la columna "Estado de indexabilidad" para ver qué páginas no son indexables. Entre los factores que provocan la no indexabilidad se incluyen el contenido duplicado, la falta de respuesta (errores 404) o metaetiquetas como "nofollow". Para resolver estos problemas, compruebe lo siguiente: Renderizado HTML y JavaScript: Asegúrese de que la configuración de agente de usuario de Screaming Frog coincide con la de los robots de Google para simular con precisión cómo se rastrea su sitio. Habilite la representación de JavaScript si su sitio depende de él para la generación de contenido. Elementos de enlace canónicos: Compruebe que las etiquetas canónicas están correctamente implementadas. Las páginas no indexables debido a una canonicalización incorrecta deben tener el elemento de enlace canónico apuntando a la URL correcta e indexable. Configuración de meta y cabecera: Revise las metaetiquetas y las respuestas de cabecera de las páginas no indexables. Elimine las directivas "nofollow" y corrija las etiquetas "noindex" mal configuradas. Mapa del sitio y profundidad de rastreo: Asegúrese de que su mapa del sitio XML está actualizado e incluye todas las URL indexables. En Screaming Frog, analiza la profundidad de rastreo para asegurarte de que las páginas importantes no están demasiado enterradas para que los motores de búsqueda las encuentren fácilmente. Contenido duplicado y Alt Text: Solucione los problemas de contenido duplicado y asegúrese de que se utiliza correctamente el texto alternativo para las imágenes, que puede afectar a la indexabilidad. Validación y configuración en Google Search Console: Después de realizar los cambios, valídelos a través de Google Search Console. Esto le dará una idea de cómo Google ve su sitio después de la corrección. Panel de detalles derecho en Screaming Frog: Utilice el panel de detalles de la derecha en Screaming Frog para inspeccionar URLs individuales en busca de errores específicos o advertencias relacionadas con la indexabilidad. Al abordar estos elementos, puede mejorar la indexabilidad de las URL de su sitio, mejorando su visibilidad en los resultados de búsqueda de Google.

Corregir las URLs no indexables en Screaming Frog

Isaac Adams-Hands - Corrección de URLs no indexables en Screaming Frog

La fijación de URLs no indexables en Screaming Frog puede ser un verdadero dolor. Afortunadamente, hay una manera fácil de hacerlo. Esta entrada del blog le mostrará cómo solucionarlos en tan sólo unos minutos. Por lo tanto, si usted está teniendo problemas para conseguir sus URLs indexado¡sigue leyendo! Le mostraremos cómo solucionarlos en Screaming Frog y conseguir que su sitio web se posicione mejor en los resultados de búsqueda de Google.

Índice de contenidos

Cómo arreglar las URLs no indexables en Screaming Frog
Códigos de estado de indexabilidad
200 Códigos de estado
3XX Códigos de error
Códigos de error 404
5XX Códigos de error
Conclusión
PREGUNTAS FRECUENTES

Cómo arreglar las URLs no indexables en Screaming Frog

Códigos de estado de indexabilidad
Existen cuatro códigos principales de estado de indexabilidad: 2XX, 3XX, 4XX y 5XX.

Código 200: un motor de búsqueda puede acceder con éxito a la página.
Código 301La página ha sido trasladada permanentemente a una nueva ubicación.
Código 302La página ha sido trasladada temporalmente a una nueva ubicación.
Código 404: la página no pudo ser encontrada.
Código 500: el servidor ha encontrado un error de cliente.

Estos códigos son esenciales para entender cómo un motor de búsqueda interactúa con su sitio web.

La comprensión de estos códigos de estado de indexabilidad le permite controlar mejor cómo la rana gritona encuentra un error al escanear su sitio web.
200 Códigos de estado
En la mayoría de los casos, se ha aplicado una etiqueta no-index al sitio web creando un estado No-indexable.

Si tiene un sitio web de WordPress, puede consultar Ajustes >> Lectura >> Visibilidad en los motores de búsqueda para ver si se ha marcado la casilla que hace que el sitio web se configure como no-index.

Si eso no resuelve su problema, puede comprobar las páginas individuales para una etiqueta no-index; si usted está usando el plugin Yoast, puede comprobar en el nivel de la página en Avanzado >> ¿Permitir que los motores de búsqueda muestren esta página en los resultados de búsqueda?

También puede comprobar su archivo Robots.TXT, que puede encontrar en su sitio web yendo al nombre del dominio seguido de domain.com/robots.txt. Buscará un Disallow: / el escenario.

Por último, puedes mirar las etiquetas canónicas de tu página

La URL en el navegador y rel="etiqueta canónica" deben coincidir. Si son incorrectos (por ejemplo Rel está configurado como HTTP y la página web está configurada como HTTPS), puede corregir la URL canónica mediante la función Mejor plugin de búsqueda y reemplazo o en el plugin Yoast.
3XX Códigos de error
Cuando vea un código de error 3XX, la URL está redirigida. Tendrá que arreglar manualmente las redirecciones de URL en su sitio web o utilizar un plugin. 3XX significa que los motores de búsqueda sólo pueden indexar el destino final.
Códigos de error 404
Si está experimentando errores 4XX, puede arreglar los enlaces manualmente o utilizar un plugin como Redirection. Los errores 404 no son indexables ya que son los "Página no encontrada" página de advertencia.

Los errores 403 indican en la mayoría de los casos que un sitio web externo está bloqueando su rastreador por razones de seguridad.
5XX Códigos de error
El código de error 5XX significa que ha ocurrido un Error Interno del Servidor. Este error es comúnmente causado por Screaming Frog escaneando demasiado rápido para el servidor y se sobrecarga, quedándose sin recursos del servidor (memoria).

Para solucionar este error, puede actualizar el servidor de su sitio web o reducir la velocidad con la que el rastreador escanea su sitio web.

En Screaming Frog, puede actualizar la velocidad de rastreo yendo a Configuración >> Velocidad >> Hilo máximo.

Conclusión

Siguiendo nuestra guía sobre la fijación de páginas no indexables o etiquetas canónicas no indexables en Screaming Frog, puede asegurarse de que tantas personas vean su sitio web como sea posible. Esto ayudará a mejorar la clasificación de su sitio en las páginas de resultados de búsqueda de Google y aumentará las posibilidades de que los clientes potenciales encuentren su negocio en línea. Para obtener más información o tutoriales, puede visitar el sitio web de Screaming Frog o conseguir un experto en SEO que haría estos SEO técnica para usted.

PREGUNTAS FRECUENTES

¿Cómo puede identificar y corregir las URL no indexables en Screaming Frog SEO Spider?
Para arreglar URLs no indexables usando Screaming Frog SEO Spider, primero debe rastrear su sitio para identificar estas URLs. Mire la columna "Estado de indexabilidad" para ver qué páginas no son indexables. Los factores que causan la no indexabilidad pueden ser el contenido duplicado, la falta de respuesta (errores 404) o metaetiquetas como "nofollow". Para resolver estos problemas, compruebe lo siguiente:
1. Renderizado HTML y JavaScript: Asegúrese de que la configuración de agente de usuario de Screaming Frog coincide con la de los robots de Google para simular con precisión cómo se rastrea su sitio. Habilite la representación de JavaScript si su sitio depende de él para la generación de contenido.
2. Elementos de enlace canónicos: Compruebe que las etiquetas canónicas están correctamente implementadas. Las páginas no indexables debido a una canonicalización incorrecta deben tener el elemento de enlace canónico apuntando a la URL correcta e indexable.
3. Configuración de meta y cabecera: Revise las metaetiquetas y las respuestas de cabecera de las páginas no indexables. Elimine las directivas "nofollow" y corrija las etiquetas "noindex" mal configuradas.
4. Mapa del sitio y profundidad de rastreo: Asegúrese de que su mapa del sitio XML está actualizado e incluye todas las URL indexables. En Screaming Frog, analiza la profundidad de rastreo para asegurarte de que las páginas importantes no están demasiado enterradas para que los motores de búsqueda las encuentren fácilmente.
5. Contenido duplicado y Alt Text: Solucione los problemas de contenido duplicado y asegúrese de que se utiliza correctamente el texto alternativo para las imágenes, que puede afectar a la indexabilidad.
6. Validación y configuración en Google Search Console: Después de realizar los cambios, valídelos a través de Google Search Console. Esto le dará una idea de cómo Google ve su sitio después de la corrección.
7. Panel de detalles derecho en Screaming Frog: Utilice el panel de detalles de la derecha en Screaming Frog para inspeccionar URLs individuales en busca de errores específicos o advertencias relacionadas con la indexabilidad.
Al abordar estos elementos, puede mejorar la indexabilidad de las URL de su sitio, mejorando su visibilidad en los resultados de búsqueda de Google.

Publicado en: 2022-09-26
Actualizado el: 2024-05-07

Isaac Adams-Hands

Isaac Adams-Hands es el director de SEO en SEO North, una empresa que ofrece servicios de optimización de motores de búsqueda. Como profesional de SEO, Isaac tiene una considerable experiencia en SEO On-page, SEO Off-page y SEO Técnico, lo que le da una ventaja frente a la competencia.