La guía definitiva para principiantes sobre el uso de Screaming Frog

Si no está familiarizado con el mundo del marketing en Internet y alguien le dice que debe usar Screaming Frog, ¿qué pensaría? Probablemente los llamaría locos. Sin embargo, resulta que Screaming Frog es una excelente herramienta que muy pocas personas usan en toda su extensión.

¿Qué es Screaming Frog?

Ahora, cuando la gente habla de Screaming Frog, no se refiere a la empresa y sus servicios de marketing web. Sin duda, puede contratarlos para cualquier trabajo de SEO que desee realizar, pero no estoy aquí para eso.

Estoy aquí para enseñarte cómo usar la herramienta gratuita que proporcionan, el Herramienta Screaming Frog SEO Spider.

Una araña es una pieza de software que se arrastra por un sitio web, recopila datos y se los presenta al propietario de la araña. Google tiene una flota de estas cosas que usa para indexar Internet de la manera más completa posible, para usar en los resultados de búsqueda.

Otros motores de búsqueda: todo, desde Yahoo y Bing hasta bichos raros como millón corto use arañas de búsqueda propias o extraiga índices de datos de otras entidades que usan arañas.

Esta araña en particular es una aplicación de escritorio que puede descargar y ejecutar desde su PC local, independientemente de la plataforma. Obtiene datos de SEO, incluidos URL, metadatos, categorías de esquema y más.

El principal beneficio de Screaming Frog’s Spider es la capacidad de buscar y filtrar varios problemas de SEO. No es necesario tener un conocimiento profundo de SEO para descubrir qué se hace y qué no se hace correctamente; la herramienta ayudará a filtrarlo por usted. Puede encontrar redireccionamientos incorrectos, actualizaciones de metadatos, páginas duplicadas, metadatos faltantes y mucho más.

La herramienta es extremadamente robusta. Los datos que recopila incluyen servidor y error de enlace, redirecciones, URL bloqueadas por robots.txt, enlaces externos e internos y su estado, el estado de seguridad de los enlaces, problemas de URL, problemas con los títulos de las páginas, metadatos, tiempo de respuesta de la página, recuento de palabras de la página , canonicalización, texto de anclaje de enlaces, imágenes con URL, tamaños, texto alternativo y mucho más.

Esencialmente, cuando hablo de hacer una auditoría del sitio o una auditoría de contenido, todo lo que te recomiendo cosechar lo puedes cosechar con Screaming Frog, Y mucho más. Además, dado que la herramienta está diseñada para ser compatible con SEO, sigue el estándar AJAX (Francis) de Google para el rastreo web.

Ahora, la herramienta básica es la versión Lite de la herramienta, que puede descargar y usar de forma gratuita. Sin embargo, te limita de varias maneras notables. Principalmente, solo puede rastrear 500 URL con él y no tiene acceso a algunas opciones personalizadas, integración de Google Analytics y un puñado de otras funciones.

Recomiendo encarecidamente que compre la licencia completa si tiene un sitio de tamaño mediano o grande con más de 500 URL que le gustaría rastrear. Es una tarifa anual de 99 libras esterlinas, que al momento de escribir este artículo equivale a unos $140. Dado que cuesta menos de $ 12 por mes, la mayoría de las empresas pueden pagarlo fácilmente y vale la pena el precio.

De forma predeterminada, Screaming Frog obedece las mismas directivas que Googlebot, incluidas las etiquetas nofollow y noindex en su robots.txt.

Sin embargo, si lo desea, puede darle directivas únicas utilizando su propio agente de usuario, «Screaming Frog SEO Spider». Esto le permite controlarlo más directamente y, potencialmente, darle más acceso del que obtiene Google. Puede leer más sobre cómo hacerlo en su página de descarga, en la parte inferior.

La guía para principiantes de Screaming Frog

Independientemente del tamaño de su sitio, a menos que esté 100% seguro de que ha hecho todo bien y no ha cometido ningún error, por cierto, está equivocado si cree eso. lo primero que debe hacer es realizar un rastreo total del sitio.

Voy a suponer que estás usando la versión completa de Screaming Frog para asegurarte de que no te has perdido nada.

Nuevamente, es súper barato, solo compre la licencia.

1. Haga clic en el menú de configuración y haga clic en la araña.
2. En el menú que aparece, haga clic en «rastrear todos los subdominios» para que se marque. También puede rastrear CSS, JavaScript, imágenes, SWF y enlaces externos para obtener una vista completa de su sitio. Puede dejarlos sin marcar si desea un rastreo más rápido de solo elementos de página y texto, pero sin medios ni scripts.
3. Inicie el rastreo y espere a que se complete. Será más rápido cuanto menos hayas marcado en el menú de configuración. También está limitado por la potencia de procesamiento y la memoria que haya asignado al programa. Cuanto más poderosa sea su computadora, más rápido se rastreará.
4. Haga clic en la pestaña Interno y filtre sus resultados por HTML. Haga clic para exportar. Se le proporcionará un archivo CSV de todos los datos rastreados, ordenados por página HTML individual. Luego puede usar esto para identificar problemas en una página determinada y solucionarlos rápida y fácilmente.

Si descubrió que Screaming Frog falla al rastrear un sitio grande, es posible que tenga problemas de memoria alta. La araña usará toda la memoria disponible y, a veces, irá más alto de lo que su computadora le permitirá manejar.

Para acelerarlo y evitar que se bloquee, deberá volver al menú de configuración de la araña. En Avanzado, marque «pausar en caso de uso elevado de memoria». Esto detendrá a la araña cuando esté consumiendo sus recursos más allá de lo que puede manejar.

Si encuentra que su rastreo se está agotando, es posible que se deba a que el servidor no maneja tantas solicitudes como desea enviar. Para limitar la velocidad de su rastreo, vaya al submenú de velocidad en el menú de configuración y elija un límite para el número de solicitudes que puede hacer por segundo.

Si desea utilizar proxies con su rastreo, para una investigación competitiva o para evitar el bloqueo de captura de bots, deberá hacer clic en configuración y hacer clic en proxy. Desde este menú, puede establecer una configuración de proxy de su elección.

Screaming Frog es compatible con prácticamente cualquier tipo de proxy que desee utilizar, aunque querrá asegurarse de que sea rápido y receptivo, de lo contrario, su rastreo probablemente llevará una eternidad.

Realizar una auditoría de enlaces con Screaming Frog

Los enlaces son difíciles de auditar porque pueden ser difíciles de recolectar. ¿Cuántos enlaces tienes en una página típica? Combine eso con todos sus parámetros y tendrá mucha información que necesita recopilar. He aquí cómo hacerlo con la araña.

1. En el menú de configuración de la araña, marque todos los subdominios pero desmarque CSS, imágenes, JavaScript, Flash y cualquier otra opción que no necesite. Decide si quieres rastrear enlaces no seguidos y marca las casillas correspondientes.
2. Inicie el rastreo y déjelo correr hasta que termine.
3. Haga clic en el menú Informe avanzado y haga clic en «Todos los enlaces» para generar y exportar un CSV de todos los enlaces que rastrea, incluidas sus ubicaciones, sus destinos, su texto de anclaje, sus directivas y otros datos.

Desde aquí puedes exportar los datos, o puedes ordenarlo tanto como quieras. Aquí hay algunos tipos y acciones que puede realizar.

• Haga clic en la pestaña interna y ordene por enlaces externos. Esto le mostrará las páginas con más enlaces en su sitio. Las páginas con más de 100 enlaces generalmente son sospechosas según Google, por lo que es posible que desee auditar esas páginas para determinar por qué tienen tantos enlaces y cómo puede minimizarlos.
• Haga clic en la pestaña interna y haga clic en el código de estado. Cualquier enlace que muestre el código de estado 404 es un enlace que está roto; querrás arreglar esos enlaces. Los enlaces que informan un 301 u otros redireccionamientos pueden estar redireccionando a páginas de inicio o a páginas dañinas; revíselos y determine si deben ser eliminados. También puede generar informes específicos para diferentes tipos de códigos de estado (3XX, 4XX o 5XX para redirecciones, errores de cliente o errores de servidor, respectivamente) en el menú desplegable Informe avanzado.
• esta guía le muestra cómo usar Majestic y Screaming Frog juntos para encontrar oportunidades de enlaces internos.

Realización de una auditoría de contenido con Screaming Frog

Las auditorías de contenido son muy importantes porque muchos de los factores de clasificación de búsqueda más importantes en la actualidad se basan en el contenido. Velocidad del sitio, integración HTTPS, integración móvil, Schema.org; Todos estos son importantes, pero no son tan importantes como tener contenido de alta calidad, buenas imágenes y falta de duplicación.

1. Realice un rastreo completo del sitio, incluidos CSS, imágenes, scripts y todo lo demás. Quiere tantos datos como sea posible.
2. En la pestaña interna, filtre por HTML, luego desplácese hasta la columna de recuento de palabras y ordénela de menor a mayor. Es probable que las páginas con menos de 500 a 1000 palabras tengan poco contenido; determinar si deben mejorarse, no indexarse ​​o eliminarse por completo. Nota: esto requerirá cierta interpretación para los sitios de comercio electrónico, en particular las páginas con información de producto mínima pero valiosa.
3. En la pestaña de imágenes, filtre por «falta texto alternativo» para encontrar imágenes que están frenando su sitio al no tener texto alternativo asociado con las imágenes. También puede filtrar por «texto alternativo de más de 100 caracteres» para encontrar imágenes con demasiado texto alternativo, lo que generalmente es perjudicial para la experiencia del usuario y para su ranking de búsqueda.
4. En la pestaña de títulos de página, filtre por títulos de más de 70 caracteres. Google no muestra mucho más que eso, por lo que los títulos demasiado extensos no le hacen ningún favor. Trunca o edita los títulos para eliminar el exceso de caracteres que no te hacen ningún bien.
5. En la misma pestaña de títulos de página, filtre por duplicado para encontrar páginas que tengan metatítulos duplicados. Los títulos duplicados indican contenido duplicado, lo cual es una penalización de Panda y puede afectar significativamente su ranking de búsqueda. Si las páginas son únicas, cambie sus títulos para reflejar su contenido. Si las páginas están duplicadas, elimine una y redirija su URL a la otra, o canonicalice el contenido si es necesario.
6. En la pestaña URL, filtre por duplicado para encontrar problemas de duplicación similares que necesiten canonicalización para corregir.
7. En la pestaña de meta descripción, filtre por duplicado para encontrar meta descripciones perezosas duplicadas en páginas únicas, o páginas duplicadas a las que se les cambió el título para que parezcan más únicas. Solucione estos problemas lo antes posible, están dañando su sitio.
8. En la pestaña URL, filtre por varias opciones para determinar las páginas que tienen URL no estándar o no legibles por humanos que podrían cambiarse. Esto es particularmente importante para las páginas con caracteres que no son ASCII o guiones bajos excesivos en la URL.
9. En la pestaña de directivas, filtre por cualquier directiva que desee para identificar páginas o enlaces que tengan directivas adjuntas. Las directivas incluyen index/noindex, follow/nofollow y varias otras directivas de uso mucho menos común. Esto también se puede usar para determinar dónde ya se implementó la canonicalización.

Creación de un mapa del sitio XML

Los sitemaps son increíblemente útiles para Google, ya que le permiten al motor de búsqueda saber dónde están todas sus páginas y cuándo se actualizaron por última vez. Puede generar uno de varias maneras diferentes, pero Screaming Frog tiene su propio método si desea usarlo. Todo lo que necesita hacer es rastrear su sitio por completo, incluidos todos los subdominios.

Luego haga clic en el menú «Exportación avanzada» y haga clic en la opción inferior, el Mapa del sitio XML opción. Esto guardará su mapa del sitio como una tabla de Excel, que luego podrá editar. Ábralo y seleccione leer en línea y «abrir como una tabla SML». Ignore las advertencias que aparecen. En forma de tabla, puede editar su mapa del sitio fácilmente y puede guardarlo como un archivo XML. Cuando haya terminado, puede subirlo a Google.

Si encuentra que ciertas secciones de su sitio no están indexadas, es posible que tenga un problema con robots.txt que marca esas subcarpetas como noindex. Además, si una página no tiene enlaces internos que apunten a ella, no se podrá rastrear.

Asegúrese de que exista cualquier página que conozca, pero que no aparezca como un enlace interno que apunte a ella.

¡Y ahí lo tienes! La guía para principiantes de Screaming Frog.