robots.txt : les erreurs qui bloquent tout un site sans qu’on le sache
Un fichier de deux lignes peut suffire à rendre invisible un site entier sur Google. Le robots.txt, c’est exactement ça : un fichier texte de quelques octets, souvent créé à la va-vite, et qui décide quelles pages les moteurs de recherche ont le droit d’explorer. Quand il contient une erreur, il n’y a ni alerte … Lire la suite