Comment indiquer un sitemap.xml dans un robots.txt ?

analytics-projet-digital

Avant tout, quelques précisions pour mieux comprendre les termes utilisés :

Qu’est-ce qu’un robots.txt ?

Le fichier robots.txt est un fichier à destination des robots d’indexation des moteurs de recherche précisant les pages qui peuvent ou ne peuvent pas être indexées.

http://www.commentcamarche.net/faq/10609-robots-txt-un-fichier-important

Qu’est-ce qu’un sitemap.xml ?

Le fichier sitemap.xml est un fichier généralement stocké à la racine de de votre site qui liste toutes les adresses de pages appartenant au site internet. Le sitemap.xml est également appelé plan de site. Sous sa forme XML, ce plan de site est à destination des moteurs de recherche qui l’utilisent pour indexer toutes les pages du site internet.

http://www.blog-nouvelles-technologies.fr/archives/1223/pourquoi-et-comment-creer-un-sitemap/

Comment indiquer un sitemap.xml dans un robots.txt ?

Etant donné que les robots d’indexation des moteurs de recherche vont rechercher en priorité le fichier robots.txt de votre site internet, indiquer dans ce fichier l’adresse du sitemap.xml va permettre aux robots d’indexation de trouver le plan de site sans trop d’effort…

Dans le fichier robots.txt qui doit se trouver à la racine de votre site.

Ajouter la ligne suivante:

Pensez à remplacer « exemple.com » par votre nom de domaine

Sauvegarder le fichier.

Information supplémentaire : cette technique est valable pour tous les moteurs de recherche (Google, Yahoo, Bing, Ask… ).

Source : http://www.annuaire-info.com/robots-txt/sitemap/

 

Claude BUENO

About Claude BUENO

Je suis passionné par les technologies de l'information et de la communication. Ma mission : accompagner les clients dans leur transformation digitale. Je blogue depuis 2008 sur les sujets numériques. Je suis fan de Star Wars, Vikings et Game of Thrones. J'habite à Tours.

  • Un Article bref mais très pratique. Merci infiniment pour le partage