[RÉGLÉ] mon robots.txt provoque une erreur 500 ?!

[FlodAriege]

Bonjour,

Je n'ai pourtant rien changé, et je m'aperçois pourtant que quand j'essaie d'accéder à mon robots.txt, ça renvoie une erreur 500...
Est-ce que ça pourrait être un problème de permissions ?
Je ne les ai pas changées, mais je vois, dans WinSCP, les droits suivants :
rw-
rw-
rw-
Ne devrais-je pas avoir le X coché aussi ?
Octal: 0644

Bizarre...
Je suis certaine d'avoir accédé sans problème à mon robots.txt le week-end dernier, quand je cherchais à comprendre pourquoi une partie de mes pages n'étaient plus indexées (elles le sont désormais)

Merci d'avance pour vos lumières

EDIT 15:42

Quand j'essaie d'accéder à mon robots.txt avec Firefox, j'ai une fenêtre qui s'ouvre disant :

Le site https://www.mondomaine.fr demande un nom d’utilisateur et un mot de passe. Le site indique : « Restricted Area »

Bon sang mais qu'est-ce qui peut donner la consigne de demander un mot de passe pour accéder à ce fichier ?
Ahhhhhhh.... Je crains que ce soit aeSecure, qui, de mémoire, a une sécurité "empêcher les curieux de fouiner dans le robots.txt"
Sauf qu'empêcher Google d'y accéder, ce n'était pas le but...
... et que n'ayant plus d'accès à mon interface aeSecure, je ne peux pas changer ce paramètre !

Différence entre Firefox et Chrome :
Chrome envoie juste une erreur 500, sans davantage d'explication
Firefox demande un login et, si on refuse de répondre, renvoie une erreur 401 Unauthorized Ce fichier requiert une autorisation

cavo789 une idée ?
SimonG es-tu là ??

[RobertG]

As-tu tenté de simplement renommer ton .htaccess pour voir si ça supprime ce blocage ainsi que celui de l'accès à l'interface aeSecure ?

644 est normal pour les fichiers. La demande d'identification en front-end est quant à elle vraiment étonnante...

[cavo789]

As-tu tenté de simplement renommer ton .htaccess pour voir si ça supprime ce blocage ainsi que celui de l'accès à l'interface aeSecure ?

644 est normal pour les fichiers. La demande d'identification en front-end est quant à elle vraiment étonnante...

As-tu tenté de remettre une version d'aeSecure ou cas où ton actuelle serait corrompue ?

Envoie moi un accès FTP à ton site et l'URL de celui-ci via mon interface send.avonture.be et je tâcherai de regarder.

[FlodAriege]

As-tu tenté de simplement renommer ton .htaccess pour voir si ça supprime ce blocage ainsi que celui de l'accès à l'interface aeSecure ?

644 est normal pour les fichiers. La demande d'identification en front-end est quant à elle vraiment étonnante...

Non, je n'ai pas tenté ça, car la dernière fois que je me suis retrouvée sans htaccess, j'ai complètement perdu accès au site.
Et puis je me dis (et Christophe semble d'accord) que si le htaccess était en cause, je n'aurais pas accès à mon back-end et/ou à mon front-end.

Par contre, avant de te répondre, je suis quand même allée vérifier mon htaccess en détail (comparaison avec une version antérieure).
Et ce faisant, je me suis dit 'tiens, et si je cherche "robots", qu'est-ce que je vais trouver ?"

Ben...
... j'ai trouvé la protection aeSecure 2.7 contre les curieux :

<IfModule mod_rewrite.c>
  Block curious who try to get access to the robots.txt file from an url.
 RewriteEngine On
 RewriteRule robots.txt$ /aesecure/setup.php?r=1 [L]
</IfModule>

... que je me suis empressée de commenter.
(je restais bloquée en mode 'j'ai pas d'accès à aeSecure donc je ne peux pas désactiver cette sécurité" sans penser que je pouvais très bien intervenir au niveau du htaccess).

Et donc...
Problème réglé : robots.txt revenu

Merci, une fois de plus, pour ta contribution, tu m'as aidée à trouver la solution (à plusieurs on est plus intelligents !!)

(par contre, reste à savoir pourquoi cette protection aeSecure provoque un comportement aberrant qui empêche Google de le lire, mais ça c'est un autre problème)

[cavo789]

Non, je n'ai pas tenté ça, car la dernière fois que je me suis retrouvée sans htaccess, j'ai complètement perdu accès au site.
Et puis je me dis (et Christophe semble d'accord) que si le htaccess était en cause, je n'aurais pas accès à mon back-end et/ou à mon front-end.

Par contre, avant de te répondre, je suis quand même allée vérifier mon htaccess en détail (comparaison avec une version antérieure).
Et ce faisant, je me suis dit 'tiens, et si je cherche "robots", qu'est-ce que je vais trouver ?"

Ben...
... j'ai trouvé la protection aeSecure 2.7 contre les curieux :

  Block curious who try to get access to the robots.txt file from an url.
 RewriteEngine On
 RewriteRule robots.txt$ /aesecure/setup.php?r=1 [L]

... que je me suis empressée de commenter.
(je restais bloquée en mode 'j'ai pas d'accès à aeSecure donc je ne peux pas désactiver cette sécurité" sans penser que je pouvais très bien intervenir au niveau du htaccess).

Et donc...
Problème réglé : robots.txt revenu

Merci, une fois de plus, pour ta contribution, tu m'as aidée à trouver la solution (à plusieurs on est plus intelligents !!)

(par contre, reste à savoir pourquoi cette protection aeSecure provoque un comportement aberrant qui empêche Google de le lire, mais ça c'est un autre problème)

Logique car ton interface retourne une erreur 500 (reste à comprendre pourquoi et c'est toute la discussion avec ton fichier d'erreur non généré par ton hébergeur).

Si tu commentes le code l'interface n'est plus appelée. Le problème t reste toujours lié à ton erreur 500...

[FlodAriege]

Logique car ton interface retourne une erreur 500

Qu'est ce qui est logique ?
Que mon robots.txt - qui contenait la directive 2.7 - renvoie une erreur 500 à cause de mon interface aesecure qui elle-même est en erreur 500 ? C'est ça ?

(reste à comprendre pourquoi et c'est toute la discussion avec ton fichier d'erreur non généré par ton hébergeur).

Il semble que les erreurs osient en fait reportées à l'intérieur du fichier des accès.
Comme je l'indique dans le post sur le error logs, j'ai des lignes comme celle-ci dans ce fichier :

11.111.111.1 - - [04/May/2019:14:56:13 +0200]
"GET /favicon.ico HTTP/1.1" 404 1549 www.mondomaine.fr "
https://www.mondomaine.fr/aesecure/setup.php?xxxxxxxxxxxxxxxxxxxxxxxxxxxxxx"
"Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/74.0.3729.108 Safari/537.36" "-"

Si tu commentes le code l'interface n'est plus appelée. Le problème t reste toujours lié à ton erreur 500...

Tout ce que j'ai commenté, c'est l'instruction concernant le robots.txt
avant que je commente, le robots n'était plus accessible à personne, ni à moi, ni à Google
après que je j'ai commenté les lignes consacrées au robots.txt dans le htaccess, le robots.txt a réapparu

mais bien sûr ça ne change rien à mon problème avec aesecure...