AhrefsBot
Descubre el rastreador web que alimenta Ahrefs.
| Versión | 7.0 |
|---|---|
| Tipo de bot | Bueno (se identifica, tiene un nombre oficial) |
| Categoría | Marketing |
| Obedece al archivo robots.txt | Sí |
| Obedece el retraso de rastreo | Sí |
| Cadena de agente de usuario | Mozilla/5.0 (compatible; AhrefsBot/7.0; +http://ahrefs.com/robot/) |
| Sufijo DNS inverso | ahrefs.com |
| Intervalo de direcciones IP |
Estado del sitio web
¿Qué es AhrefsBot?
AhrefsBot es un rastreador web que alimenta la base de datos tanto de Ahrefs, un conjunto de herramientas de datos en línea; como de Yep, un motor de búsqueda web de ingresos compartidos. Se trata del tercer rastreador con más actividad, solo después de Google y Bing, visita más de 8000 millones de páginas web cada 24 horas y actualiza su índice cada 15-30 minutos.
Nuestro bot indexa información precisa y actualizada sobre sitios web y sus contenidos, así como la forma en la que se enlazan entre sí. Estos datos son de mucha utilidad y se pueden aprovechar de formas muy diversas:
Realiza búsquedas en Yep para encontrar contenido de gran calidad y toda la información que necesitas. Todo ello, mientras apoyas a un motor de búsqueda alternativo que pretende aportar ingresos a tus creadores de contenido favoritos.
Si eres el propietario de un sitio web, utiliza Ahrefs para analizar la estructura, el contenido y los backlinks de tu sitio web y obtener información sobre su rendimiento. Luego, optimízalo para mejorar la experiencia del usuario, posicionarlo mejor en los motores de búsqueda y conseguir más tráfico.
Cuando se trata de análisis a escala web, Ahrefs te permite conocer los cambios de popularidad de un sitio web o de un tema concreto a lo largo del tiempo, los tipos de contenidos a los que enlaza cada sitio web, las veces que se ha mencionado una marca recientemente y mucho más.
Rank | Bot | Owner | Category |
|---|---|---|---|
1 | GoogleBot | Search Engine Crawler | |
2 | BingBot | Microsoft | Search Engine Crawler |
3 | DataDog Synthetic Bot | DataDog | Monitoring & Analytics |
4 | AhrefsBot | Ahrefs | Search Engine Optimization |
5 | Qualys | Qualys | Search Engine Crawler |
6 | YandexBot | Yandex | Search Engine Crawler |
7 | PetalBot | Huawei | Search Engine Crawler |
8 | Google AdsBot | SAdvertising & Marketing | |
9 | Google Image Proxy | Page Preview | |
10 | Google Images | Search Engine Crawler |
Bots ordenados según el número de solicitudes. Datos facilitados con fecha de abril de 2023
¿Tienes preguntas? Tenemos las respuestas
¿Respeta AhrefsBot los archivos robots.txt?
Sí. Por supuesto.Respetamos rigurosamente tanto las reglas de no permitir (disallow) como las de permitir (allow) del archivo robots.txt.¿Cómo puedo controlar AhrefsBot en mi sitio web?
Como AhrefsBot sigue rigurosamente el archivo robots.txt de tu sitio web, tienes el control total de lo que hace.Para cambiar la frecuencia con la que AhrefsBot visita tu sitio, especifica el retraso mínimo adecuado entre dos solicitudes consecutivas en tu archivo robots.txt:Agente de usuario: AhrefsBotRetraso de rastreo: [valor](Donde el valor del retraso de rastreo representa tiempo en segundos.)Si quieres que AhrefsBot deje de visitar tu sitio, añade estas dos líneas al archivo robots.txt de tu servidor:Agente de usuario: AhrefsBotNo permitir: /Ten en cuenta que es posible que AhrefsBot necesite tiempo para incorporar los cambios de tu archivo robots.txt. Esto se realiza antes del siguiente rastreo programado.Además, si tu archivo robots.txt contiene errores, AhrefsBot no podrá reconocer tus comandos y seguirá rastreando tu sitio web de la misma forma que lo hacía antes.Obtén más información sobre robots.txt en www.robotstxt.org.Si crees que AhrefsBot está mostrando un mal comportamiento en tu sitio web o si tienes preguntas, ponte en contacto con [email protected] y haremos todo lo posible para ayudarte.
¿Tienes más preguntas?
Si tienes más preguntas,
contáctanos para que podamos ayudarte.