[Problème] robots.txt et Weblinks

[fredjouan]

Bonjour,
Comment paramétrer le fichier robots.txt pour que Google Search console reconnaisse les liens du composant dans le fichier sitemap.xml ?
J'ai essayé cette ligne, mais sans succès :

Allow: /components/com_weblinks/*

Merci de votre aide
Fred

[RobertG]

Re : robots.txt et Weblinks

Tu n'as a priori pas besoin de l'astérisque, et surtout, pense à placer ta ligne avant "Disallow: /components"

[fredjouan]

Re : robots.txt et Weblinks

Merci Robert, toujours fidèle au poste… et plus rapide que ton ombre !
Je ne sais pas où trouver de la doc en français sur le fichier robots.txt, alors je m'inspire de ce qui se fait, ce qui donne :

User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /cli/
Allow: /components/*/assets/css/*.css$
Allow: /components/*/assets/js/*.js$
Allow: /components/com_jce/editor/tiny_mce/plugins
Allow: /components/com_weblinks/
Disallow: /components/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /logs/
Allow: /modules/
Allow: /modules/mod_cookiesaccept
Allow: /modules/mod_slideshowck
Allow: /modules/mod_itpshare
Allow: /modules/mod_krizalys_breadcrumbs
Disallow: /plugins/
Allow: /plugins/system/jcemediabox
Allow: /plugins/system/jsntplframework
Allow: /plugins/system/tooltipgc
Disallow: /templates/
Allow: /templates/*/images
Allow: /templates/*/css
Allow: /templates/*/js
Disallow: /tmp/
Disallow: /*/component/mailto/*
Disallow: /*print=1*
Disallow: /*.feed*
Noindex: /*?view=archive
Noindex: /*component/tags/tag
Noindex: /*print=1*
Noindex: /*?id=article*
Noindex: /*/component/content/article.html?id=*
Noindex: /component/mailto/*
Sitemap: http://www.mondomaine.com/sitemap.xml
Sitemap: http://www.mondomaine.com/ror.xml

Je me suis offert RSSeo qui génère un plan de site sitemap, ainsi qu'un fichier ror.xml pour les autres moteurs que Google
Et cela semble efficace.
Fred

[fredjouan]

Re : robots.txt et Weblinks

Bonjour,
J'ai toujours un problème de réglage du fichier robots.txt, Google Analytics me signale des erreurs sur les liens de ce composant :

Le sitemap contient des URL qui sont bloquées par le fichier robots.txt.
Valeur : http://www.mondomaine.com/component/...res?Itemid=139

Pourtant, j'ai bien inséré la ligne :

Allow: /components/com_weblinks/

Tous les liens de ce composant sont en erreur.
Merci d'avance de votre aide,
Fred