C'est impossible à faire directement (de façon statique) car dans chaque échange avec Joomla il faut un identifiant de sécurité qui permet de vérifier que les infos envoyées proviennent bien du formulaire envoyé préalablement par Joomla.
Ainsi le lien doit être crée dynamiquement et serait quelque chose du type /?option=com_users&task=user.logout suivit des paramètres de sécurité qui changent à chaque nouvel envoi (affichage).
Peut-être en utilisant le module de connexion/déconnexion dans ton menu (si ton module de menu le permet comme maximenu CK par exemple) qui afficherait le bouton "déconnexion" dans le menu.
Commentaire