Le fichier robots.txt

Discussion dans 'Tutoriels' démarrée par AsTr0, Jui 16, 2009.

  1. AsTr0

    AsTr0 Member

    Vous connaissez le rôle du fichier robots.txt? http://www.robotstxt.org/
    On utilise ce fichier pour interdire à un moteur de recherche d'indexer un dossier ou un fichier.

    Mais ne déclarez pas dans ce fichier robots.txt un répertoire ou un fichier qui doit rester secret non seulement des moteurs de recherche mais aussi des pirates !! Tout le monde peut lire le contenu du fichier robots.txt et donc trouver l'adresse de votre dossier/fichier secret.

    Pour garder un dossier à l'abri des regards des robots indexeurs et des pirates, il est plus efficace de le protéger avec un mot de passe htaccess
     

Partager cette page