L'En Dehors

Salut,

tous ce passe dans l'élément <meta>
c'est un élément vide; l'information est contenue dans ses attributs.


maintenant venons en au problème actuel.
Je pense que le choix qui  est actuellement dans la valeur content est:
<meta name="robot" content="follow" />
 
en effet cette valeur autorise l'indexation simultanée de la page concernée et des pages qui sont les cibles des liens contenus dans cette page.
Le choix de cette valeur est riqué car il produit des indexations en chaîne si les pages cibles font de même.

pour empêcher cette indexation des pages liées.
<meta name="robot" content="nofollow" />,


<meta name="revisit-after" content="1 days" />
cette valeur précise aux robots des moteurs de recherche la périodicité des passages en nombre de jours sur le site.

A+
Floreal

salut,

au vu des données technique du site l'endehors que j'ai reperé tout à l'heure :

Domain Name:ENDEHORS.ORG
Server Type:       Apache/1.3.33 (Unix) mod_perl/1.29
IP Address:     213.186.57.165
IP Location:     France - Ovh Sas
Response Code:     200
Blacklist Status:     Clear
SSL Cert:     No valid SSL on this Host
Website Status:     Active

il est possible de placer un fichier .htaccess (le . devant htaccess est obligatoire) sous le dossier www de l'hébergement ovh (la racine du site en fait).
le contenu de ce fichier pour bloquer slurp sera

RewriteEngine on
RewriteCond %{HTTP_USER_AGENT} ^.*Slurp.*$ [OR]
RewriteRule /* http://www.perdu.com [L,R]

en gros tout ce qui arrive et qui s'identifie comme étant Slurp est balancé vers http://www.perdu.com...
.htaccess permet d'effectuer du paramétrage d'Apache sans modifier le fichier httpd.conf qui ne peut être modifié que par l'hébergeur du site...(à moins de posséder un serveur dédié...)

salut floreal,

yahoo ne respecte pas les rel="nofollow" comme la plupart des autres robots de recherche !

le nofollow permet d'indiquer au robot qu'il ne suive pas les liens présent sur la page, il n'évite pas la visite du robot sur la page en question

d'ailleurs si tu recherche "yahoo" +  "nofollow" sur le net tu verras la confirmation de ce que je dis sur pas mal de site technique...

Anonyme, on fait comme pour  placer un fichier .htaccess sous le dossier www de l'hébergement ovh ?

Il faut avoir acccès à son espace par ftp ou sftp et transférer ce fichier à la racine. de cet espace. Ce qui n'est peut-être pas forcément possible sur des blogs.

Salut anonyme

Il ne me semblait pas que libertad soit pour la suppresion du passage des robots sur le site. Il avait l'air de trouver qu'il passait trop souvent (problème des multiples liens sur le site) à son c(g)oût en bande passante.
maintenant s'il veut supprimer les robots
content="none" ou "noindex"

D'après ce que tu dis de yahoo et consorts, j'en déduis qu' ils ne respectent pas les accords  du W3C, comme les états membres de l'ONU ne respectent pas les leurs.

En tout cas, sur la toile comme dans la vie, il faut tendre à être le plus autonome possible.
En l'occurence, les ossatures prémachées et les hébergements sur serveurs externes  montrent vite leurs limites.

Effectivement on souhaite juste empêcher l'accès de Slurp et pas des autres robots, la méthode donnée par anonyme semble juste empêcher Slurp, comme on a pas d'accès ftp à la racine, on va demander au responsable du serveur de le faire.

Anonyme du 24-12-06
à 17:07, est-il possible de modifier un peu le texte pour que Slurp ne puisse plus passer qu'une fois par jour ?

et bien non ce n'est pas possible de faire cela avec la solution évoquée le 24. <br />

Merci anonyme pour ton coup de main, on va voir avec l'animateur de joueb. Nous sommes en recherche de personnes qui puissent nous donner des conseils ponctuellement comme celui-ci, si tu voulais nous communiquer ton adresse mail en nous écrivant à l'adresse du site, cela nous aidrait bien. A bientôt

salut,<br /><br />je suis peut etre un peu en retard, mais je suis tombé chez vous, et en meme temps sur ca:<br /><br />http://www.webrankinfo.com/actualites/200611-fichier-robots-txt.htm<br /><br />donc y'a moyen de bloquer slurp...<br /><br /><br />Je suis aussi dispo pour des petits conseils techniques si besoin.<br /><br />Aplus !<br /><br />opi <br />