MSN - Pas la suite de l'Robots.txt me causer des questions

  • ctrenks
  • Student
  • Student
  • No Avatar
  • Inscription: Nov 09, 2004
  • Messages: 87
  • Status: Offline

Message Avril 13th, 2007, 7:51 am

Mon site http://www.allfreechips.com a environ 12 copies en cache de l'index sur MSN car j'ai un code de référence i ajouté. Ainsi, même si le fichier robots.txt nie? Ref = index MSN toujours de causer d'énormes problèmes avec moi duplicate content je pense. Cela dure depuis le vivre et se déplacer à MSN, j'ai écrit une ou deux fois. J'ai aussi un répertoire limité allfreechips. com / cportal / elles cache des centaines de pages à partir de là.

tout thoughs si im manque somthing.

http://www.allfreechips.com/robots.txt
  • Anonymous
  • Bot
  • No Avatar
  • Inscription: 25 Feb 2008
  • Messages: ?
  • Loc: Ozzuland
  • Status: Online

Message Avril 13th, 2007, 7:51 am

  • ATNO/TW
  • Super Moderator
  • Super Moderator
  • Avatar de l’utilisateur
  • Inscription: Mai 28, 2003
  • Messages: 23404
  • Loc: Woodbridge VA
  • Status: Offline

Message Avril 13th, 2007, 8:56 am

Cela permettra d'interdire tous les robots:

Quote:
User-agent: *
Disallow: / phpBB2/admin /
Disallow: / phpBB2/db /
Interdire: / phpBB2/images /
Disallow: / phpBB2/includes /
Disallow: / phpBB2/language /
Disallow: / phpBB2/templates /
Disallow: / phpBB2/common.php
Disallow: / phpBB2/config.php
Disallow: / phpBB2/faq.php
Disallow: / phpBB2/groupcp.php
Disallow: / phpBB2/login.php
Disallow: / phpBB2/memberlist.php
Disallow: / phpBB2/modcp. php
Disallow: / phpBB2/posting.php
Disallow: / phpBB2/privmsg.php
Disallow: / phpBB2/profile.php
Disallow: / phpBB2/search.php
Disallow: / phpBB2/viewonline.php
Disallow: / phpBB2/-vp.html $
Disallow: / cportal /
Disallow: / c /
Disallow: /? Ref =
Disallow: /? Type =
Disallow: / afc-récompenses /
Disallow: / casino-software /


Vous avez besoin de la Asterick "joker" pour signaler tous les robots. - Qui comprennent MSN. À l'heure actuelle, vous ne nie Google et Inktomi. Ce milieu ne fait rien parce que vous n'avez pas un agent utilisateur spécifié.
"There's no place like 127.0.0.1 except for ::1."
Alexandria Networks. Leader in IT consulting for associations/non-profits, and small to medium sized businesses around the northern Virginia and Washington D.C. metro area.
  • ctrenks
  • Student
  • Student
  • No Avatar
  • Inscription: Nov 09, 2004
  • Messages: 87
  • Status: Offline

Message Avril 13th, 2007, 8:57 am

Woo Hoo .. Merci pour les commentaires sur celui-ci, permet de voir ce qui se passe :)
  • factoring
  • Novice
  • Novice
  • No Avatar
  • Inscription: Avr 17, 2007
  • Messages: 20
  • Status: Offline

Message Avril 17th, 2007, 10:48 am

Vous pouvez également essayer de mettre un message robots dans votre tête tag.

Afficher de l'information

  • Total des messages de ce sujet: 4 messages
  • Utilisateurs parcourant ce forum: Aucun utilisateur enregistré et 8 invités
  • Vous ne pouvez pas poster de nouveaux sujets
  • Vous ne pouvez pas répondre aux sujets
  • Vous ne pouvez pas éditer vos messages
  • Vous ne pouvez pas supprimer vos messages
  • Vous ne pouvez pas joindre des fichiers
 
 

© 2011 Unmelted, LLC. Ozzu® est une marque déposée de Unmelted, LLC