Robots.txt

De lo que puedo averiguar su para la búsqueda de motores pero no estoy seguro de lo que debe colocar en un archivo robots.txt. ¿también cómo detener el motor de búsqueda ir a directorios que no quiero saber de personas?

Su simple bonito si desea bloquear todos los robots.

Acabo de poner un agente de usuario: * en la parte superior de su robot.txt de archivo y, a continuación, utilice las palabras clave de permitir/denegar.



Lo anterior lo dirá robots para no ir mirando a través de la carpeta privada o la carpeta de archivos, pero le indicará a mirar el archivo upload.php dentro de la carpeta de archivos. También les dice no deben mirar la página search.php.

Cómo cada vez si impide: / privado si alguien quiere todavía puede ver el robots.txt y ver que no va a que. ¿derecho?

Ya, el texto de robot es no impedir que la gente pueda ver los archivos, solo para detener los robots, como google, de indexación de archivos que no desea ser indexado en google. Ahora si realmente desea impedir que la gente pueda ver el archivo robot.txt podría volver a escribir la dirección url a un archivo php y compruebe al agente de usuario allí. A continuación, si alguien que eso no es un bot no poder incluso ver ver el contenido.

Generalmente no utiliza un archivo robot.txt para proteger los archivos.

Por ejemplo, tengo una carpeta que utilizar para almacenar basura aleatoria general. Básicamente mi propio archivo aloja el sitio. Realmente no me importa si alguien se pregunta sobre y descargas algo de él o considera algunas imágenes, pero realmente no quiero google para plantear las imágenes que no tienen nada que ver con mi sitio. También impide robots de indexación mis versiones beta de sitios. Quiero que sea visible al público pero no quiero que google a indexar todavía como no están terminados.

También generalmente no desea google a mi página de resultados de búsqueda de índice.

¿Ahora puede scripts php de robots decript? ¿como una secuencia de comandos de base de datos?

¿Quiere decir que leer la fuente de un script php? No, se interpretan scripts php en el servidor y, a continuación, apache (o que su uso) envía la salida para el robot de navegador.

Parodia de gracias. Estoy seguro de que esto ayudará a otros también.!