Cómo mantener el rastreo de Yahoo uno de mis sitios.

Quiero dejar de Yahoo el rastreo de un sitio. He leído que no obedecen el archivo robots.txt. ¿Qué debo hacer para cuerdas en uso. Htaccess y / o el archivo robots.txt para lograr esto?

Gracias.

SK

Bueno, definitivamente "lee" el archivo robots.txt El identificador es Inktomi Slurp, pero también he leído que también es ahora conocido como Yahoo! Slurp (aunque sólo he visto Inktomi Slurp en mi diario. Añadir esta a su archivo robots.txt y supervisar los resultados para ver si funciona.

User-Agent: Inktomi Slurp
Inhabilitar /

User-Agent: Yahoo! Slurp
Inhabilitar /

¿No está seguro de por qué youd quieren hacer más que otras para ahorrar ancho de banda, no obstante.

La razón Im haciendo esto --- y no está seguro de Im es una buena idea o no --- es que tengo dos sitios que promueven el mismo servicio. Theyre en diferentes direcciones IP y servidores, y un aspecto distinto. Pero hay algunos texto común, aunque no idénticos. Im que figuran en Yahoo para mi viejo sitio y no quiere que botched. Así que pensé que debería prohibir Yahoo y MSN de rastreo el nuevo sitio ya que estoy con ellos indizada. Im prohibido el uso de Google con el antiguo sitio, pero no los nuevos. Por lo tanto, Im no está seguro de qué hacer allí.

Cualquier comentario a tomar este tipo de acción?