Nuevo usuario
·

publicidad

archivo robots.txt
  · Índice de subforos · Blogs bugs

Buscar · Tags · Tagboard · Usuarios · Fisgona · F.A.Q.

Autor Mensaje 
SeinaSeina
Usuario habitual
Usuario habitual

Haz clic para ver el perfil del usuario
Mensajes: 91
Desde: 11/Dic/2004
archivo robots.txt

Desde el día 13 y 14 de marzo Googlebot no ha accedido a dos blogs que llevo, siendo así que antes los rastreaba  diariamente (<meta name="revisit-after" content="1 days" />

La herramienta 'Análisis de robots.txt' para ver si el archivo robots.txt bloquea URL específicas, me dice:
- El archivo robots.txt no es válido.

- El archivo robots.txt contiene más de 5000 caracteres. Esta herramienta puede analizar archivos robots.txt con 5000 caracteres como máximo.

Compruebo que el archivo robots.txt muestra todo el código fuente correspondiente a esta página vuestra http://blogs.miarroba.com/error.php que nada tiene que ver...

Si el análisis lo repito vaciando temporalmnte el contenido del archivo me dice: autorizado

¿Podéis mirarlo ahí?

26/Mar/2008 12:51 GMT+1 Perfil ·  Privado · Desconectado ·  Web
LiMLiM
Administrador del foro
Administrador del foro

Haz clic para ver el perfil del usuario

Usuario PRO Usuario PRO
Mensajes: 4.138
Desde: 07/Mar/2002
RE: archivo robots.txt

Corregido, hemos creado un fichero /robots.txt genérico que permite analizar la página a todos los robots sin limites.



“Un banquero es un señor que nos presta un paraguas cuando hace sol y nos lo exige cuando empieza a llover”. "Mark Twain"
26/Mar/2008 14:04 GMT+1 Perfil ·  Privado · Desconectado ·  Web ·  Fotolog
PaseanteDelForoPaseanteDelForo
Moderador
Moderador

Haz clic para ver el perfil del usuario

Usuario PRO Usuario PRO
Mensajes: 1.833
Desde: 10/May/2006
RE: archivo robots.txt

Cita
Corregido, hemos creado un fichero /robots.txt genérico que permite analizar la página a todos los robots sin limites.



¿que antes la teniais limitada por algo?
26/Mar/2008 16:16 GMT+1 Perfil ·  Privado · Desconectado ·  Web ·  Fotolog
LiMLiM
Administrador del foro
Administrador del foro

Haz clic para ver el perfil del usuario

Usuario PRO Usuario PRO
Mensajes: 4.138
Desde: 07/Mar/2002
RE: archivo robots.txt

No, no habia limites, es más, los robots que yo sepa, si no encuentran fichero robots.txt correcto consideran que pueden entrar hasta la cocina..

“Un banquero es un señor que nos presta un paraguas cuando hace sol y nos lo exige cuando empieza a llover”. "Mark Twain"
26/Mar/2008 19:48 GMT+1 Perfil ·  Privado · Desconectado ·  Web ·  Fotolog
· Índice de subforos · Blogs bugs

Temas similares Autor#VisitasÚltimo post
posible rastreo erróneo de robots31/Mar/2008, 12:23
SeinaSeina
 4 20201/Abr/2008, 12:56
TitoTito Ir al último mensaje del tema

Opciones:

Versión imprimible del tema
Subscríbete a este tema
Date de baja de este tema
Menear este tema en meneame.net
Ir al subforo:  

TU NO PUEDES Escribir nuevos temas en este foro
TU NO PUEDES Responder a los temas en este foro
TU NO PUEDES Editar tus propios mensajes en este foro
TU NO PUEDES Borrar tus propios mensajes en este foro

Todas las fechas y horas son GMT+1. Ahora son las 09:31
 

©2001-08 Miarroba Networks, S.L.
Todos los derechos reservados

    Añadir a Favoritos     Establecer como página de inicio     Contacte con nosotros   Alojamiento web en Ferca Network
Miarroba Networks, S.L. Apartado de correos, 50, 39610 Astillero (CANTABRIA) - CIF B-39512736
Inscrita en el Registro Mercantil de Cantabria, tomo 743, folio 161, libro 0, hoja S-12428, Instripción 1ª
publicidad