 Seina
Usuario habitual
Mensajes: 91
Desde: 11/Dic/2004 | archivo robots.txt
Desde el día 13 y 14 de marzo Googlebot no ha accedido a dos blogs que llevo, siendo así que antes los rastreaba diariamente (<meta name="revisit-after" content="1 days" />
La herramienta 'Análisis de robots.txt' para ver si el archivo robots.txt bloquea URL específicas, me dice:
- El archivo robots.txt no es válido.
- El archivo robots.txt contiene más de 5000 caracteres. Esta herramienta puede analizar archivos robots.txt con 5000 caracteres como máximo.
Compruebo que el archivo robots.txt muestra todo el código fuente correspondiente a esta página vuestra http://blogs.miarroba.com/error.php que nada tiene que ver...
Si el análisis lo repito vaciando temporalmnte el contenido del archivo me dice: autorizado
¿Podéis mirarlo ahí?
|
 26/Mar/2008 12:51 GMT+1 |  Perfil ·  Privado ·  Desconectado ·  Web |
LiM
Administrador del foro
 Usuario PRO
Mensajes: 4.138
Desde: 07/Mar/2002 | RE: archivo robots.txt
Corregido, hemos creado un fichero /robots.txt genérico que permite analizar la página a todos los robots sin limites.
“Un banquero es un señor que nos presta un paraguas cuando hace sol y nos lo exige cuando empieza a llover”. "Mark Twain" |
| 26/Mar/2008 14:04 GMT+1 | Perfil · Privado · Desconectado · Web ·  Fotolog |
PaseanteDelForo
Moderador
Usuario PRO
Mensajes: 1.833
Desde: 10/May/2006 | RE: archivo robots.txt
Cita
Corregido, hemos creado un fichero /robots.txt genérico que permite analizar la página a todos los robots sin limites.
¿que antes la teniais limitada por algo?
|
| 26/Mar/2008 16:16 GMT+1 | Perfil · Privado · Desconectado · Web · Fotolog |
LiM
Administrador del foro
Usuario PRO
Mensajes: 4.138
Desde: 07/Mar/2002 | RE: archivo robots.txt
No, no habia limites, es más, los robots que yo sepa, si no encuentran fichero robots.txt correcto consideran que pueden entrar hasta la cocina..
“Un banquero es un señor que nos presta un paraguas cuando hace sol y nos lo exige cuando empieza a llover”. "Mark Twain" |
| 26/Mar/2008 19:48 GMT+1 | Perfil · Privado · Desconectado · Web · Fotolog |
Nuevo usuario
Foro de soporte y ayuda 
