Volver al Otros Motores de Búsqueda y Directorios

robots.txt

  • KozSEO
  • Newbie
  • Newbie
  • No Avatar
  • Registrado: Nov 19, 2004
  • Mensajes: 8
  • Loc: USA
  • Status: Offline

Nota Noviembre 19th, 2004, 9:48 am

Mi mantener archivos de registro muestran 404 errores en mi archivo robots.txt
Tuve el archivo validado y parece muy bien, aquí está el archivo

#Permite que todos los robots

User-agent: *
Disallow:

Me acaban de comenzar utilizando el archivo robot.txt, es en la raíz dir.
Creo que esto es detener el sitio de ser rastreado profunda.

Le agradecería cualquier aporte
  • Anonymous
  • Bot
  • No Avatar
  • Registrado: 25 Feb 2008
  • Mensajes: ?
  • Loc: Ozzuland
  • Status: Online

Nota Noviembre 19th, 2004, 9:48 am

  • FatMouth
  • Graduate
  • Graduate
  • Avatar de Usuario
  • Registrado: Oct 31, 2004
  • Mensajes: 130
  • Status: Offline

Nota Noviembre 19th, 2004, 12:13 pm

Si su sitio para el en tu perfil, no hay ningún archivo robots.txt.
  • KozSEO
  • Newbie
  • Newbie
  • No Avatar
  • Registrado: Nov 19, 2004
  • Mensajes: 8
  • Loc: USA
  • Status: Offline

Nota Noviembre 19th, 2004, 12:20 pm

no es para este sitio

http://www.unclecharleyssausage.com/robots.txt

KOZ
  • FatMouth
  • Graduate
  • Graduate
  • Avatar de Usuario
  • Registrado: Oct 31, 2004
  • Mensajes: 130
  • Status: Offline

Nota Noviembre 19th, 2004, 12:30 pm

Hmmm, no veo por qué sería conseguir un "404" entonces. Tal vez alguien pueda arrojar algo de luz sobre este tema.

BTW-cool buscando sitio!
  • zcorpan
  • Student
  • Student
  • No Avatar
  • Registrado: Nov 10, 2004
  • Mensajes: 77
  • Status: Offline

Nota Noviembre 21st, 2004, 10:10 am

http://www.robotstxt.org/wc/norobots.html
Quote:
La presencia de un vacío "/ robots.txt" archivo no tiene asociado explícitamente la semántica, que serán tratados como si no estaba presente, es decir, todos los robots se consideran a sí mismos bienvenida.
Usted puede borrar su archivo robots.txt si quieres que les permita índice de su sitio...

Página 1 de 1

Publicar Información

  • Total de mensajes en este tema: 5 mensajes
  • Usuarios navegando por este Foro: No hay usuarios registrados visitando el Foro y 18 invitados
  • No puede abrir nuevos temas en este Foro
  • No puede responder a temas en este Foro
  • No puede editar sus mensajes en este Foro
  • No puede borrar sus mensajes en este Foro
  • No puede enviar adjuntos en este Foro
 
 

© 2011 Unmelted, LLC. Ozzu® es una marca registrada de Unmelted, LLC