Tweet
Bonjour,
Je viens de subir une perte de 50% de mes visites du jour au lendemain et en allant sur webmaster tools, je vois qu'il est écrit que google ne peut accéder à toutes mes ressources...
Je voulais avoir votre avis sur mon fichier robots.txt, savoir s'il était correct ou s'il y avait quelques modifications à y apporter.
Je n'y ai pastouché depuis un bail donc on ne sait jamais.
De son coté google me donne un avertissement sur le "crawl-delay : 10"
Toute remarque et suggestion est la bienvenue, merci d'avance
Je viens de subir une perte de 50% de mes visites du jour au lendemain et en allant sur webmaster tools, je vois qu'il est écrit que google ne peut accéder à toutes mes ressources...
Je voulais avoir votre avis sur mon fichier robots.txt, savoir s'il était correct ou s'il y avait quelques modifications à y apporter.
Je n'y ai pastouché depuis un bail donc on ne sait jamais.
De son coté google me donne un avertissement sur le "crawl-delay : 10"
Toute remarque et suggestion est la bienvenue, merci d'avance
Code:
# If the Joomla site is installed within a folder such as at # e.g. www.example.com/joomla/ the robots.txt file MUST be # moved to the site root at e.g. www.example.com/robots.txt # AND the joomla folder name MUST be prefixed to the disallowed # path, e.g. the Disallow rule for the /administrator/ folder # MUST be changed to read Disallow: /joomla/administrator/ # # For more information about the robots.txt standard, see: # http://www.robotstxt.org/orig.html # # For syntax checking, see: # http://tool.motoricerca.info/robots-checker.phtml User-agent: Mediapartners-Google Allow: / User-agent: * Allow: /*.js* Allow: /*.css* Allow: /*.png* Allow: /*.jpg* Allow: /*.gif* Crawl-delay: 10 Allow: /index.php?option=com_jreviews&format=ajax Allow: /components/*.js Allow: /components/*.css Allow: /components/*.png Allow: /components/*.jpg Allow: /components/*.gif Allow: /components/*.woff Allow: /components/*.svg Allow: /components/*.eot Allow: /components/*.ttf Allow: /templates/*.js Allow: /templates/*.png Allow: /templates/*.jpg Allow: /templates/*.gif Allow: /templates/*.css Allow: /templates/*.woff Allow: /templates/*.svg Allow: /templates/*.eot Allow: /templates/*.ttf Allow: /media/*.js Allow: /media/*.css Allow: /media/*.png Allow: /media/*.jpg Allow: /media/*.gif Allow: /media/*.woff Allow: /media/*.svg Allow: /media/*.eot Allow: /media/*.ttf Allow: /images/*.png Allow: /images/*.jpg Allow: /images/*.gif Allow: /modules/*.js Allow: /modules/*.css Allow: /modules/*.png Allow: /modules/*.jpg Allow: /modules/*.gif Allow: /modules/*.woff Allow: /modules/*.svg Allow: /modules/*.eot Allow: /modules/*.ttf Allow: /libraries/*.js Allow: /libraries/*.css Allow: /libraries/*.png Allow: /libraries/*.jpg Allow: /libraries/*.gif Allow: /libraries/*.woff Allow: /libraries/*.svg Allow: /libraries/*.eot Allow: /libraries/*.ttf Disallow: /libraries/ Disallow: /administrator/ Disallow: /cache/ Disallow: /cli/ Disallow: /includes/ Disallow: /installation/ Disallow: /language/ Disallow: /logs/ Disallow: /tmp/ Disallow: /? Disallow: /component/ Allow: /component/osmap/ Disallow: /*order= User-Agent: BLEXBot Disallow: /
)
Commentaire