Les trackers de visibilité LLM en valent-ils la peine ?

TL;DR

1. En matière de visibilité LLM, toutes les marques ne sont pas égales. Pour certains, cela compte bien plus que pour d’autres.
2. Les LLM donnent des réponses différentes à la même question. Les trackers combattent cela en simulant des invites à plusieurs reprises pour obtenir un score moyen de visibilité/citation.
3. Bien que la simulation des mêmes invites ne soit pas parfaite, les avantages secondaires tels que l'analyse des sentiments ne sont pas des problèmes spécifiques au référencement. Ce qui est une bonne chose pour le moment.
4. À moins qu’un tracker de visibilité n’offre suffisamment d’échelle à un prix raisonnable, je me méfierais. Mais si le trafic se convertit bien et que vous avez besoin d’en savoir plus, bénéficiez du suivi.

Une petite mise en garde pour commencer. Cela dépend vraiment de la manière dont votre entreprise gagne de l'argent et du fait que les LLM constituent un élément fondamental du parcours de votre public. Vous devez comprendre comment les gens utilisent les LLM et ce que cela signifie pour votre entreprise.

Les marques qui vendent des produits physiques ont un parcours différent de celui des éditeurs qui vendent des opinions ou des entreprises SaaS qui s'appuient plus que quiconque sur des requêtes de comparaison.

Ou une société de codage détruite par un modérateur sournois de Reddit avec un os à ramasser…

Par exemple, Ahrefs a rendu publiques certaines de ses données sur les taux de conversion provenant des LLM. 12,1 % de leurs inscriptions provenaient de LLM, sur seulement 0,5 % de leur trafic total. Ce qui est énorme.

Mais pour nous, le trafic LLM se convertit bien moins bien. C'est une fraction de fraction.

Honnêtement, je pense que les trackers de visibilité LLM à cette échelle sont un peu là aujourd'hui et disparaîtront demain. Si vous pouvez vous le permettre, tant mieux. Sinon, ne vous inquiétez pas. Prenez tout cela avec une pincée de sel. La recherche par l’IA n’est qu’une partie de la plupart des voyages, et le suivi des mêmes invites jour après jour présente des défauts évidents.

Ils ne font que regrouper ce que quelqu'un a dit à votre sujet sur Reddit alors qu'ils se foutent de la merde en 2016.

Que font-ils ?

Les trackers comme Profound et Brand Radar sont conçus pour vous montrer comment votre marque est encadrée et recommandée dans les réponses de l'IA. Au fil du temps, vous pourrez mesurer votre visibilité et celle de vos concurrents sur les plateformes.

Mais la visibilité du LLM n’est que de la fumée et des miroirs.

Posez une question, obtenez une réponse. Posez la même question, à la même machine, depuis le même ordinateur, et obtenez une réponse différente. Une réponse différente avec des citations et des entreprises différentes.

Il faut que ce soit comme ça, sinon nous n'utiliserions jamais les plus ennuyeux.

Pour lutter contre la variance inhérente déterminée par leur réglage de température, les trackers LLM simulent des invites à plusieurs reprises tout au long de la journée. Ce faisant, vous obtenez une visibilité et un score de citation moyens ainsi que d'autres modules complémentaires véritablement utiles comme votre score de sentiment et une analyse comparative des concurrents.

« Des valeurs plus élevées comme 0,8 rendront la sortie plus aléatoire, tandis que des valeurs plus faibles comme 0,2 la rendront plus ciblée et déterministe. »

Documentation OpenAI

Simulez une invite 100 fois. Si votre contenu était utilisé dans 70 des réponses et que vous étiez cité sept fois, vous auriez un score de visibilité de 70 % et un score de citation de 7 %.

Croyez-moi, c'est bien mieux qu'il n'y paraît… Ces moteurs ne veulent pas vous envoyer de trafic.

Selon les excellents mots de Brian Balfour, ils ont identifié les douves et les portes sont ouvertes. Ils vont bientôt fermer. À leur fermeture, la monétisation sera difficile et rapide. La probabilité d’un trafic de référencement, à moins qu’il ne soit monétisé, est faible.

Comme toutes les entreprises technologiques.

Autant que je sache, il existe deux modèles principaux.

1. Payez pour un outil qui suit les invites synthétiques spécifiques que vous ajoutez vous-même.
2. Achetez un outil de type entreprise qui suit une plus grande partie du marché à grande échelle.

Certains outils, comme Profound, offrent les deux. Le modèle le moins cher (le prix ne convient pas à la plupart des entreprises) vous permet de suivre les invites synthétiques sous des sujets et/ou des balises. Le modèle d’entreprise vous offre une échelle nettement plus grande.

Alors que des outils comme Ahrefs Brand Radar offrent une vue plus large de l’ensemble du marché. Comme les invites sont toutes synthétiques, il y a quelques trous assez gros. Mais je préfère une large visibilité.

Je ne l'ai pas encore utilisé, mais je pense que Similarweb a lancé son propre outil de suivi de la visibilité LLM, qui inclut de véritables invites utilisateur à partir des données Clickstream.

Cela en fait une version beaucoup plus utile de ces outils à mon avis et contribue dans une certaine mesure à répondre à l'éléphant synthétique dans la pièce. Et cela vous aide à comprendre le rôle que jouent les LLM dans le parcours utilisateur. Ce qui est bien plus précieux.

Le problème

Un bon référencement améliore-t-il vos chances d'améliorer la visibilité de votre LLM ?

Cela y ressemble certainement…

GPT-5 n'a plus besoin de s'entraîner sur plus d'informations. Il est aussi compétent que ses suzerains veulent désormais payer. Il en a assez de ravager les détritus d'Internet et se tourne vers un index de recherche en utilisant RAG pour vérifier une réponse. Une réponse, elle n'a pas tout à fait le niveau de confiance approprié pour répondre efficacement.

Mais je suis sûr que nous devrons le modifier quelque peu si votre objectif principal est d'augmenter la visibilité du LLM. L’augmentation des dépenses consacrées au TOFU et aux campagnes de relations publiques numériques est un point notable.

À l'heure actuelle, les LLM ont un problème évident de spam. Je ne pense pas qu’ils seront prêts à investir dans la résolution de si tôt. La bulle de l’IA et la valorisation brute de ces entreprises dicteront la manière dont elles généreront leurs revenus. Et vite.

Cela ne résoudra certainement pas leur problème de spam. Quand vous avez un contrat de 300 milliards de dollars à payer et des revenus de 12 milliards de dollars, vous avez besoin de plus d’argent. Rapidement.

Ainsi, quiconque paie pour les meilleures inclusions de liens de page ou ajoute du texte caché et du pied de page à ses sites Web en bénéficiera à court terme. Mais la plupart d’entre nous devraient encore construire des choses réelles, respirantes et ronflantes.

Avec les nouvelles itérations de trackers LLM appelant la recherche au lieu de formuler une réponse aux invites basée sur les « connaissances » acquises, il devient encore plus difficile de créer une « stratégie d'optimisation LLM ».

En tant que site d'actualités, je sais que la plupart des invites dans lesquelles nous apparaissons vaguement déclencheraient l'index Web. Donc je ne vois tout simplement pas vraiment la valeur. C'est très axé sur le référencement.

Comment ajouter de la valeur grâce à l'analyse des sentiments

J'ai trouvé que le suivi des invites dans les LLM à un niveau purement de réponse n'apportait presque aucune valeur. Alors, oublions tout ça un instant et utilisons-les pour autre chose. Commençons par une analyse des sentiments.

Ces trackers nous donnent accès à :

• Un score de sentiment en ligne plus large.
• Examinez les sources auxquelles les LLM ont fait appel (à un niveau rapide).
• Scores de sentiment par sujets.
• Invites et liens vers des sources d’informations sur site et hors site.

Vous pouvez identifier où commencent certains de ces problèmes. Ce qui, pour être honnête, est essentiellement Trustpilot et Reddit.

Je ne vais pas tout passer en revue, mais quelques exemples rapides :

1. Les LLM peuvent faire référence à certains podcasts et newsletters pas si récemment disparus comme des « raisons de s'abonner ».
2. Votre processus d'annulation peut être cité comme le problème le plus grave pour la plupart des clients.

À moins que vous n’ayez explicitement déclaré que ces podcasts et newsletters sont terminés, tout est permis. Vous devez resserrer votre stratégie de marketing produit et de communication.

Pour les gens d’abord. Puis pour les LLM.

Ce ne sont pas des projets spécifiques au référencement. Nous entrons dans une ère où les seuls projets de référencement seront difficiles à mener à bien. Un moyen fantastique d’obtenir l’adhésion est de mettre en avant les projets présentant des avantages dehors de recherche.

Mettre en évidence des problèmes commerciaux graves : avis médiocres, informations inexactes et obsolètes, etc. – peut aider à attirer l’attention et le soutien des dirigeants pour certains projets clés en matière de réputation de marque.

Pour moi, cela n'a rien à voir avec les LLM. Ou ce que notre public pourrait demander à un moteur de réponse mal informé. Ils ne sont que le vaisseau.

Il s’agit de résoudre des problèmes. Des problèmes qui génèrent une réelle valeur pour votre entreprise. Dans votre cas, il pourrait s'agir d'augmenter la LTV d'un client. Augmenter leur taux de rétention, réduire le taux de désabonnement et augmenter les chances de conversion en offrant une expérience améliorée.

Si vous travaillez dans le référencement depuis assez longtemps, quelqu'un aura lancé l'idée d'améliorer votre sentiment et vos avis en ligne.

Qui sait, Jeff. Cela dépend vraiment de ce qui vous retient par rapport à vos concurrents. Et qu'on le veuille ou non, la recherche n'est pas très investissable dès maintenant.

Mais cela n'a pas d'importance dans ce cas. Ce n'est pas un projet axé sur la recherche. C'est un projet axé sur le public. Cela englobe tout le monde. Du service client au référencement et à la rédaction. C'est exactement la bonne chose à faire pour l'entreprise.

Un rapide rappel à Google Leak vous montre combien de mesures d'évaluation et de sentiments axées sur les sentiments peuvent affecter votre classement.

Pendant longtemps, la recherche a porté sur les marques et la confiance. Volume de recherche de marque, surperformant le CTR attendu (un modèle prédictif de type bayésien), le trafic direct, ainsi que l'engagement et la satisfaction généraux des utilisateurs.

Ce n’est pas parce que Google sait mieux que les gens. C'est parce qu'ils ont stocké ce que nous pensons des pages et des marques par rapport aux requêtes et l'ont utilisé comme boucle de rétroaction. Google fait confiance aux marques parce que nous le faisons.

La plupart d’entre nous n’ont jamais eu à se soucier des critiques et des sentiments. Mais c’est le moment idéal pour résoudre tous les problèmes que vous pourriez rencontrer sous le couvert d’AEO, GEO, SEO ou peu importe comment vous voulez l’appeler.

L'article de Lars Lofgren intitulé Comment un concurrent a paralysé un bootcamp de 23,5 millions de dollars en devenant modérateur de Reddit est un regard incroyable sur la façon dont Codesmith a été anobli par des relations publiques négatives. PR négatif démarré et maintenu par un mod Reddit. Un.

Garder un œil sur votre réputation et identifier les problèmes potentiellement graves n’est donc jamais une mauvaise chose.

Pourrais-je simplement construire le mien ?

Ouais. Pour commencer, vous aurez besoin d'une estimation des coûts mensuels de l'API LLM en fonction du nombre de jetons mensuels requis. Utilisons le niveau de tarification bas de gamme de Profound comme estimation et notre vieil ami Gemini pour déterminer certains coûts estimés.

• 200 invites × 10 exécutions × 12 jours (environ) × 3 modèles = 24 000 exécutions mensuelles.
• 24 000 exécutions × 1 000 jetons/requête (estimation conservatrice) = 24 000 000 de jetons.

Sur cette base, voici une estimation (espérons-le) précise des coûts par modèle de notre ami robot.

À ce moment-là. Vous avez maintenant besoin de fonctionnalités back-end, de stockage de données et d'une visualisation frontale. Je ferai le bilan au fur et à mesure.

Back-End

• Un Scheduler/Runner comme Render VPS pour exécuter 800 appels API par jour.
• Un orchestrateur de données. Essentiellement, du code Python pour analyser le JSON brut et extraire les données de citation et de visibilité pertinentes.

Stockage des données

• Une base de données, comme Supabase (que vous pouvez intégrer directement via Lovable), pour stocker les réponses brutes et les métriques structurées.
• Stockage de données (qui doit être inclus dans votre base de données).

Visualisation frontale

• Un tableau de bord Web pour créer des tableaux de bord interactifs et partageables. J’aime sans ironie Lovable. Il est facile de se connecter directement aux bases de données. J'ai également utilisé Streamlit auparavant. Lovable semble beaucoup plus élégant mais présente ses propres défis.
• Vous aurez peut-être également besoin d'une bibliothèque de visualisation pour vous aider à générer des tableaux et des graphiques de séries chronologiques. Certains tableaux de bord intègrent cela.

96 $ tout compris. Je pense qu'il est probable que ce soit plus proche de 50 $ plutôt que 100 $. Pas de lésin. À l'extrémité supérieure des budgets pour les outils que j'utilise (Lovable) et certaines estimations de Gemini, nous parlons d'un outil qui coûtera moins de 100 $ par mois pour fonctionner et fonctionner très bien.

Ce n'est pas un projet ou une configuration compliquée. C'est, à mon avis, un excellent projet pour apprendre les ficelles du codage vibratoire. Ce qui, je dirai, n’est pas que du soleil et des arcs-en-ciel.

Alors, dois-je en acheter un ?

Si vous pouvez vous le permettre, j'en achèterais un. Pendant au moins un mois ou deux. Passez en revue votre sentiment en ligne. Voir quelles personnes vraiment parlez de vous en ligne. Identifiez quelques gains à faible impact en matière de marketing produit et de gestion des évaluations/réputation, et examinez les performances de vos concurrents.

Cela pourrait être la partie la plus importante de la visibilité du LLM. Configurez un tableau de bord de suivi via Google Analytics (ou tout autre fournisseur d'analyses redoutable que vous utilisez) et voyez a) combien de trafic vous obtenez et b) s'il est précieux.

Plus il est précieux, plus le suivi de votre visibilité LLM sera utile.

Vous pourriez également en fabriquer un. La joie d'en fabriquer un est que a) vous pouvez apprendre une nouvelle compétence et b) vous pouvez fabriquer d'autres choses pour le même coût.

Frustrant, oui. Amusant? Absolument.

Plus de ressources :

---

Cet article a été initialement publié sur Leadership In SEO.

---