Vérifier comment les assistants IA présentent votre entreprise

Prenons une entreprise fictive qui entretient des réfrigérateurs commerciaux dans la région de Québec. Elle veut savoir si les assistants IA la proposent à des restaurants qui cherchent ce service.

Deux essais donnent des résultats différents. Dans la première réponse, l’entreprise n’est pas nommée. Dans la seconde, elle apparaît, mais l’assistant lui attribue un service de réparation de réfrigérateurs domestiques qu’elle n’offre pas. Ces constats appellent des actions différentes. L’absence du nom demande d’autres vérifications; la description inexacte peut déjà amener un client à demander un service que l’entreprise n’assure pas.

La méthode ci-dessous permet de conserver les informations nécessaires pour comprendre chaque résultat.

Distinguer la recherche de fournisseurs d’une question sur une entreprise connue

Avec « Qui entretient les réfrigérateurs commerciaux à Québec? », vous demandez à l’assistant de trouver des entreprises. Avec « Quels services offre [nom de l’entreprise]? », vous lui donnez déjà le nom de celle qui vous intéresse.

La deuxième question peut révéler une erreur à corriger. Elle ne permet toutefois pas de savoir si un acheteur aurait découvert l’entreprise sans connaître son nom. Examinez donc séparément les résultats de ces deux types de questions.

Pour commencer, nous proposons douze questions : quatre sur le besoin et les prestataires possibles, quatre pour comparer les options et quatre pour vérifier les conditions avant de choisir. Il s’agit d’une méthode de travail proposée dans cet article, et non d’une norme du secteur.

Reprenez des questions reçues par votre équipe. Pour chacune, précisez si vous attendez une explication générale ou une suggestion de fournisseur. L’assistant peut répondre correctement à une question sur l’entretien des appareils sans nommer d’entreprise.

Commencer par un nombre de réponses que vous pourrez examiner

Choisissez un assistant, une langue et les douze questions. Posez chaque question deux fois, dans des conversations séparées. Vous aurez 24 réponses à examiner si tous les essais aboutissent.

Ouvrez une nouvelle conversation chaque fois que vous posez une question, afin de limiter l’influence des échanges précédents. Gardez le même mode, par exemple la recherche sur le Web, et notez la région associée au compte, si vous la connaissez. Ces précautions rendent les essais plus comparables; elles n’éliminent pas toute personnalisation.

Enregistrez la formulation exacte de la question, la date, le nom de l’assistant, le mode et la réponse complète avec ses liens. Notez le nom du modèle s’il est affiché. Sinon, indiquez que cette information est inconnue.

Si le service est indisponible ou qu’une erreur technique survient, l’essai n’a produit aucune réponse à examiner. Vous ne pouvez donc pas le compter comme une réponse où votre entreprise serait absente. Sur Google, une recherche qui ne produit aucun aperçu IA constitue un autre cas à relever séparément : aucune réponse n’a été générée.

Lire les réponses avant de calculer un pourcentage

Pour chaque réponse obtenue, remplissez un tableau avec les colonnes suivantes :

Colonne	Ce que vous notez
Nom de l’entreprise	Est-il présent dans le texte?
Lien vers votre site	Quelle page est proposée comme source?
Service recommandé	L’assistant propose-t-il réellement votre entreprise pour la demande?
Description correcte	Les services, la clientèle et le territoire sont-ils exacts?
Problème à vérifier	Quelle phrase est trompeuse et quelle page pourrait être à l’origine de l’erreur?

Le terme « citation » désigne ici un lien vers une source. Votre article peut être cité pour expliquer l’entretien préventif, sans que l’assistant recommande pour autant votre entreprise.

Conservez aussi les réponses défavorables et les contradictions. Ne retenir que la meilleure réponse donnerait une image trompeuse de l’ensemble des essais.

Expliquer exactement ce que mesure le résultat

Dans un exemple fictif, 24 essais donnent 20 réponses et 4 erreurs techniques. L’entreprise est nommée dans 6 des 20 réponses, soit 30 %. Présentez séparément les 4 essais qui ont échoué : le pourcentage se calcule uniquement sur les 20 réponses obtenues.

Pour Google, distinguez aussi deux mesures : la proportion des recherches qui produisent un aperçu IA, puis la présence de votre entreprise dans les aperçus obtenus. Confondre ces mesures empêcherait de comprendre ce qui explique une variation.

Ce pourcentage vaut pour les questions et les conditions de votre essai. Il ne représente ni votre part de marché ni la proportion de tous les clients qui découvrent votre entreprise. Ajouter des questions qui contiennent son nom peut faire monter le pourcentage sans qu’elle soit plus facile à trouver pour quelqu’un qui ne la connaît pas.

Lors de la prochaine série d’essais, reprenez les mêmes questions. Si vous devez en ajouter, conservez-les dans une liste distincte ou signalez que vous commencez une nouvelle version du test.

Élargir seulement si le travail est utile

Vous pourrez ensuite comparer plusieurs assistants ou fonctions de recherche, par exemple ChatGPT avec la recherche sur le Web, Perplexity, Copilot et l’une des fonctions de Google. Choisissez AI Mode ou AI Overviews selon ce qui est accessible; si vous testez les deux, comptez-les séparément.

Douze questions posées à quatre services, dans deux langues et à trois reprises donnent 288 essais. Examiner toutes ces réponses peut demander beaucoup de temps. Ce nombre ne correspond pas à 288 acheteurs et ne rend pas votre liste de questions représentative du marché.

Si un outil automatise ce suivi, demandez s’il utilise les applications accessibles au public ou une API, c’est-à-dire une interface permettant à des logiciels de communiquer. Les réponses obtenues par une API ne reproduisent pas nécessairement celles qu’un client voit dans son application. Assurez-vous de pouvoir consulter les réponses complètes et récupérer leurs liens.

Définir la correction à apporter

Pour notre entreprise de réfrigération, il faudrait d’abord vérifier pourquoi l’assistant lui attribue la réparation d’appareils domestiques. Consultez les sources citées. Si vous y trouvez une ancienne fiche inexacte ou une page ambiguë, corrigez-la. Si l’origine de l’erreur reste inconnue, indiquez-le dans votre relevé.

Désignez une personne responsable de la correction et notez la date du changement. Répétez ensuite les mêmes essais pour observer l’évolution des réponses. Rien ne garantit qu’un assistant reprendra immédiatement l’information corrigée.

Le cahier pratique sert à conserver ces réponses et à suivre les corrections. Le travail technique et la réécriture des pages sont expliqués dans les articles suivants.

Voir les dix articles sur la présence de votre entreprise dans les réponses IA