Cuando creas tu primer proyecto en Semrush, Auditoría del sitio se configura y lanza automáticamente para el dominio que has indicado. Una vez completado el rastreo inicial, puedes ver los resultados enAuditoría del sitio, en el panel lateral o en lapágina principal.
Para cualquier proyecto posterior que crees, necesitas configurar Auditoría del sitio manualmente. Crea un nuevo proyecto desdeAuditoría del sitio y sigue las indicaciones para configurar y lanzar tu campaña de auditoría.
Si Auditoría del sitio no se está ejecutando, consultaSolucionar problemas de Auditoría del sitio.
Configuración general
El primer paso del asistente de configuración es Ajustes generales. Desde aquí, haz clic en Iniciar auditoría para ejecutar una auditoría con la configuración predeterminada, o bien personaliza los ajustes de la auditoría primero. Puedes cambiar los ajustes y volver a ejecutar la auditoría en cualquier momento para rastrear un área más específica de tu sitio web.
Alcance
Para rastrear un dominio, subdominio o subcarpeta concretos, introdúcelo en el campo Alcance. Si introduces un dominio, también puedes seleccionar la casilla Rastrear todos los subdominios.
Por defecto, Auditoría del sitio rastrea el dominio raíz, incluidos todos los subdominios y subcarpetas disponibles de tu sitio web. Para limitar el rastreo, especifica un subdominio o subcarpeta como alcance de rastreo y desactiva la casilla Rastrear todos los subdominios.
Por ejemplo, para auditar solo tu blog, establece el alcance de rastreo en blog.semrush.com o semrush.com/blog/, en función de si está implementado como subdominio o subcarpeta.
Límite por auditoría
A continuación, introduce cuántas páginas rastrear por auditoría en el campo Límite por auditoría. Calcula esa cantidad en función de tu suscripción y con qué frecuencia vuelves a auditar tu sitio web.
- Con el Kit de herramientas SEO Pro, puedes rastrear hasta 100.000 páginas al mes y 20.000 páginas por auditoría.
- Con el Kit de herramientas SEO Guru, puedes rastrear hasta 300.000 páginas al mes y 20.000 páginas por auditoría.
- Con el Kit de herramientas SEO Business, puedes rastrear hasta 1 millón de páginas al mes y 100.000 páginas por auditoría.
Páginas a rastrear
La configuración Páginas para rastrear determina cómo SiteAuditBot encuentra las páginas para auditar. Además de configurar la fuente de rastreo, puedes incluir o excluir subcarpetas específicas y parámetros de URL en los apartados Reglas de permitir/denegar y Reglas de parámetros de URL.
Hay 4 fuentes de rastreo: Sitio web, Sitemap de Robots.txt, Sitemap por URL e Importar URL desde archivo.
- Sitio web: Auditoría del sitio rastrea tu web utilizando un algoritmo de breadth-first search, siguiendo los enlaces del código de tu página; empezando por la página de inicio. Esto sirve para encontrar las páginas más accesibles desde tu página de inicio, que no siempre son las más importantes. Para priorizar por importancia, utiliza un sitemap como fuente de rastreo.
- Sitemap de robots.txt: Auditoría del sitio solo rastrea las URL que encuentre en el sitemap vinculado en tu archivo robots.txt.
- Sitemap por URL: Auditoría del sitio rastrea el sitemap que indiques. Introduce directamente la URL del sitemap en vez de basarte en el enlace de tu archivo robots.txt. Auditoría del sitio utiliza 1 URL de sitemap a la vez; si tu web tiene varios sitemaps, utiliza la opción Importar URL desde archivo.
- Importar URL desde archivo: Auditoría del sitio rastrea un conjunto concreto de páginas que le envíes. Da formato a tu archivo como .csv o .txt con 1 URL por línea, y después súbelo desde tu equipo. Utiliza esta opción para verificar páginas concretas y ahorrar presupuesto de rastreo. Tras subir el archivo, el asistente te dirá cuántas URL ha detectado para que puedas comprobar que se ha leído correctamente.
Programar
Indica con qué frecuencia quieres que se audite tu sitio en Auditoría del sitio:
- Una vez a la semana (elige el día que quieras)
- A diario
- Una vez
Puedes volver a hacer la auditoría cuando quieras.
Una vez que hayas configurado las opciones, haz clic en Iniciar auditoría.
Configuración avanzada
Los pasos 2 a 5 del asistente de configuración son opcionales. Puedes usarlos para controlar qué agente de usuario rastrea tu sitio, a qué velocidad lo hace, qué subcarpetas y parámetros de URL incluir, y cómo acceder a las páginas protegidas. Si las opciones de configuración predeterminadas te convencen, pásate al último paso y comienza la auditoría.
User agent
Aquí puedes elegir el agente de usuario que utiliza Auditoría del sitio para rastrear tu web Las opciones disponibles son SiteAuditBot (Escritorio), SiteAuditBot (Móvil) y Búsqueda-OpenAI. Usa la opción Búsqueda-OpenAI para comprobar si el rastreador de OpenAI puede rastrear tu sitio.
Por defecto, Auditoría del sitio rastrea con el agente SiteAuditBot (móvil), que audita tu sitio de la misma manera que lo haría el rastreador de Google para móviles. Puedes cambiar al agente SiteAuditBot (Escritorio) cuando quieras.
Cuando cambies de agente de usuario, el texto situado bajo el campo cambiará para que la configuración coincida con tu elección. Puedes copiar esta cadena en una solicitud cURL para comprobar el agente de usuario.
Retraso del rastreo
Tienes 3 opciones para establecer una velocidad de rastreo: Mínima, 1 URL cada 2 segundos y Respetar robots.txt.
Mínima: SiteAuditBot rastrea al ritmo normal, esperando alrededor de 1 segundo antes de rastrear la siguiente página. Es la opción predeterminada y la más rápida.
1 URL cada 2 segundos: SiteAuditBot baja el ritmo a 1 URL cada 2 segundos. Utiliza esta opción si el rastreo ralentiza tu sitio y no tienes ninguna directriz de retraso de rastreo en tu archivo robots.txt. La auditoría tarda más en completarse, pero causa menos problemas de velocidad a los visitantes durante el rastreo.
Respetar robots.txt: SiteAuditBot sigue el retraso de rastreo especificado en tu archivorobots.txt. Un retraso de rastreo se ve así:
Crawl-delay: 20
Renderizado JS
Activa esta opción para que SiteAuditBot ejecute los archivos JavaScript y vea el mismo contenido que tus visitantes. Obtendrás resultados de rastreo más precisos y una imagen más clara de la salud de tu sitio web.
Con esta opción desactivada, Auditoría del sitio solo analiza el HTML de tu web; el proceso es más rápido y consume menos recursos, pero los resultados son menos precisos en las webs con mucho JavaScript.
Nota: La función de análisis de JS está disponible en las suscripciones Guru o Business del kit de herramientas SEO.
Reglas de autorización y desautorización
Utiliza este paso para rastrear o bloquear subcarpetas concretas. Puedes especificar varias subcarpetas a la vez.
Introduce todo en la URL después del TLD. Si quieres rastrear la URL http://www.ejemplo.com/calzado/hombre/, introduce /calzado/hombre/ en Permitir subcarpetas.
Si quieres saltarte una subcarpeta, introduce su ruta en Denegar subcarpetas. Por ejemplo, para rastrear la categoría de zapatos de hombre pero saltarte la subcategoría de botas de montaña en https://ejemplo.com/calzado/hombre/botas-montana/, introduce /calzado/hombre/botas-montana/ en Denegar subcarpetas.
Importante: Incluye la barra inclinada al final. Si metes /calzado en lugar de /calzado/, Auditoría del sitio se saltará todo en la subcarpeta /calzado/y cada URL que empiece por /calzado, como www.ejemplo.com/calzado-hombre.
Reglas de parámetros de URL
Los parámetros de URL o parámetros de consulta son elementos de una URL que quedan fuera de la estructura jerárquica de la ruta. Se añaden al final de una URL y pasan instrucciones al navegador web.
Un parámetro de URL consta de ?, el nombre del parámetro y =. Por ejemplo, ?page=3 podría indicar la tercera página de una serie paginada.
En el apartado Reglas de parámetros de URL puedes especificar los parámetros que utiliza tu sitio, para que Auditoría del sitio los elimine de las URL mientras las rastrea. Sin esta configuración, es posible que el rastreador rastree dos versiones de una página: una con un parámetro y otra sin él, y que ello suponga un gasto innecesario del presupuesto de rastreo.
Introduce cada parámetro en Parámetros a ignorar.
Por ejemplo, introducir «page» elimina cada valor de ese parámetro: ?page=1, ?page=2, etc. A continuación, Auditoría del sitio tratará /calzado y /calzado/?page=1 como una sola URL y rastreará la página una vez.
Los parámetros más comunes son los de paginación, idioma y subcategoría. Son especialmente habituales en las webs con grandes catálogos de productos o contenidos. Los parámetros UTM, que se utilizan para registrar los clics y el tráfico procedente de campañas de marketing, son otro caso frecuente.
Para cambiar esta configuración en una campaña ya existente, abre el engranaje de ajustes y selecciona Configuración de auditoría. Ajusta las opciones que hemos descrito anteriormente según te convenga.
Restricciones a evitar
Tienes 3 opciones para auditar un sitio que esté en preproducción o que esté protegido a través de una autenticación de acceso básico.
Ignorar la directiva disallow en robots.txt y la metaetiqueta robots
Sube el archivo .txt que te proporciona Semrush a la carpeta raíz de tu web. Así se verifica que eres el propietario de la web y se le permite a SiteAuditBot rastrear las páginas bloqueadas por una directiva «Disallow» en el archivo robots.txt o por una metaetiqueta «robots» en la página.
apartado.Rastrear con mis credenciales
Introduce el nombre de usuario y la contraseña que utilizas para acceder a la parte oculta de tu web. SiteAuditBot utiliza estas credenciales para acceder a las áreas protegidas con contraseña. Es una opción recomendable para las webs que no son públicas y las que están en desarrollo.
Rastrear con la firma de Web Bot Auth
Algunas plataformas de hosting, como Shopify, bloquean por defecto los bots desconocidos por motivos de seguridad o de rendimiento. La firma Web Bot Auth permite a SiteAuditBot identificarse y demostrar que está autorizado para acceder a tu sitio. Para configurarlo:
- Marca la casilla Rastrear con la firma de Web Bot Auth
- En Agente de firma introduce la URL del agente; por ejemplo: https://shopify.com
- En Entrada de firma introduce la cadena de entrada que requiera tu host.
- En Firma, introduce la firma cifrada que proporcione tu plataforma.
Resolución de problemas
Si ves el error Error al auditar el dominio, lo más probable es que tu servidor esté bloqueando SiteAuditBot. Sigue las instrucciones del apartado Solución de problemas de Auditoría del sitio para añadir el bot a la lista de permitidos.
Además, puedes descargarte el archivo de registro que se genera cuando una auditoría da error, y enviarlo a tu webmaster. De este modo podrá identificar por qué SiteAuditBot aparece como bloqueado.
Conectar Google Analytics y Auditoría del sitio
Una vez que hayas completado el asistente de configuración, puedes conectar tu cuenta de Google Analytics para detectar problemas que afecten a tus páginas más vistas.
Volver a Kits de herramientas de Semrush categoría