Les robots lisent les mots dans les sites et il donnent une position au site en fonction des mots et du sens qu'ils en resulte. Dans le petit milieu du referencement, on dit avec humour que le webmaster donne à manger aux robots. Le référenceur doit leur donner de belles phrases si on veut que le robot classe le site en bonne position, et il ne s'agit pas d'ecrire n'importe quoi, il faut que le robot ait envie de poursuivre l'indexation des pages. Les robots adorent les beaux slogans publicitaire, ca les attire! Les robots veulent comprendre ce que nous disons nous les webmasters avec nos phrases, alors si elles changent ils reviennent nous voir et les positions grimpent, il faut s'occuper des robots, donnez de nouvelles phrases a manger aux moteurs, creez du contenu et optimisez le pour que le robot se regalle avec et vous classe bien! Bien entendu il s'agit d'une image et le robot est a la fois nous meme ou le surfeur qui visite votre site et lit son contenu qui de preference doit vouloir dire quelquechose, être pertinent :)

Demandez un devis pour le referencement de votre site dans les moteurs!

Autrement sachez qu'il existe effectivement un fameux fichier robots.txt (robots texte) en vrai et qu'il sert au robot. Ce fichier est facultatif mais certains webmasters disent qu'il vaut mieux l'avoir. Bref en general ce fichier se place à la racine du serveur. Il permet d'indiquer aux moteurs si ils peuvent indexer et suivre ou pas certains pages et repertoires du site. Il sert aussi a empecher l'acces de certains robots genre les "aspirateurs de site". On peut egallement commander le robot avec les fameuses balises meta contenues dans les entete des pages html : re-visit after 10, reviens dans 10 jours par exemple, on commande au robots de repasser tous les 10 jours. Les balises meta no index et no folows peuvent etre egallement mises sur une page web mais elles auraient moins d'influence que dans le fichier robots.txt. En pratique les robots indexent tout meme si on leur interdit, ils sont trop vorace, en fait si on ne veut pas que des choses soit indexées il ne faut pas les mettre en ligne sur un serveur, c'est aussi simple que ca!