Fichier robot.txt pour le référencement

Le fichier robots.txt est un fichier qui se trouve à la racine du site Internet. Il contient des paramètres à destination des robots des moteurs de recherche, les informant de la manière dont ils doivent référencer un site Internet.

Pré-requis

Il faut connaître la syntaxe à utiliser pour écrire le code dans le fichier robot.txt.

Objectif

Le robot.txt permet d'optimiser le référencement naturel en spécifiant comment référencer les différentes pages du site, et quelles sont celles que l'on ne doit pas traité.

Caractéristiques

Pour un connaisseur, le fichier robot.txt est rapidement mis en œuvre. Il est même possible de récupérer les fichiers d'un autre site pour l'intégrer dans le nôtre , les principales règles étant toujours identiques.

Télécharger un fichier robot.txt

Voici quelques exemples de codes à mettre dans son fichier robot.txt :

• Pour spécifier quel robot est concerné par le code suivant : User-agent: * (« * » définit tous les robots)

• On lui interdit le référencement pour le répertoire spécifié : Disallow: /installation/ (le répertoire « installation » ne doit pas être référencé).

Pour plus d'informations ?

Difficultés

Quelques configurations simples permettent d'optimiser rapidement un site Internet. Cependant, il faut des compétences importantes pour pleinement configurer un site Internet.

Compétences requises

Par ordre alphabétique :

• Développeurs d'applications
• Référenceurs

Exemple de réalisation

Bientôt disponible.

Plus d'informations ?

Contactez-nous