Le modèle d’un chatbot influe sur sa manière de suivre les instructions, d’utiliser le contenu retrouvé et de formuler ses réponses. Il ne corrige ni des sources médiocres ni des consignes vagues. La bonne question n’est donc pas de savoir quel fournisseur gagne dans l’absolu, mais quel modèle actuel répond le mieux avec votre contenu, vos visiteurs et vos règles.
Agentkit propose actuellement douze modèles d’OpenAI, Anthropic et Google. Ce guide suit ce catalogue actif et écarte les anciens modèles qui ne figurent plus dans le sélecteur.
Le catalogue de modèles actuel
| Fournisseur | Modèles disponibles dans Agentkit |
|---|---|
| OpenAI | GPT-6 Astra, GPT-6 Sol, GPT-6 Luna, GPT-5.6 Sol, GPT-5.6 Terra |
| Anthropic | Claude Fable 5.1, Claude Opus 5.5, Claude Opus 5, Claude Sonnet 5, Claude Haiku 4.5 |
| Gemini 3.7 Flash, Gemini 3.1 Pro |
Les nouveaux agents démarrent avec GPT-6 Sol sur tous les forfaits, y compris Free. Dans notre évaluation, ce modèle était le plus fiable pour répondre à partir de votre contenu et exécuter des actions et des séquences d’outils en plusieurs étapes. Les agents existants conservent le modèle sélectionné.
Les critères à comparer
Les benchmarks publics représentent rarement le travail réel d’un chatbot de site web. Une évaluation utile mesure ce que vos visiteurs constateront.
| Critère | Ce qu’il signifie | Comment le tester |
|---|---|---|
| Fidélité aux sources | La réponse reste dans le périmètre de vos sources | Posez des questions propres à votre entreprise, dont certaines sans réponse dans les sources |
| Respect des instructions | Le modèle respecte le ton, le périmètre et les règles de transfert | Testez des demandes directes, des relances et des tentatives de changement de sujet |
| Exhaustivité | La réponse contient les détails nécessaires sans les noyer | Testez des politiques, des comparaisons et des questions en plusieurs parties |
| Qualité de la conversation | Les réponses suivantes utilisent correctement les échanges précédents | Rejouez la même conversation de cinq à dix messages avec chaque modèle |
| Qualité linguistique | La réponse est naturelle dans les langues prises en charge | Utilisez les mêmes questions dans chaque langue cible |
| Temps de réponse | Le chat paraît réactif sur votre site | Mesurez de vraies conversations dans le widget, pas une démo isolée du fournisseur |
La récupération, la qualité des sources et les instructions influent sur chaque résultat. Gardez-les identiques pendant la comparaison.
Les modèles GPT-5.6
Les choix GPT-5.6 sont GPT-5.6 Sol et GPT-5.6 Terra. Comparez ces deux modèles avec votre jeu de tests pour voir si le changement améliore vraiment les réponses.
Commencez par GPT-6 Sol, le modèle par défaut. Ajoutez GPT-5.6 Sol pour les questions les plus difficiles sur les politiques, le dépannage ou les comparaisons. Testez GPT-6 Luna pour les échanges courts et fréquents. Il s’agit de rôles dans le test, pas de garanties de capacité.
Les modèles Claude
Les choix Anthropic comprennent notamment Claude Opus 5, Claude Sonnet 5 et Claude Haiku 4.5. Soumettez-leur les mêmes sources et instructions. Surveillez en particulier les détails sans source, les refus, la longueur des réponses et la stabilité du ton dans les conversations longues.
Placez Opus 5 et Sonnet 5 dans la sélection destinée aux exemples complexes. Haiku 4.5 fournit un troisième point de comparaison Anthropic pour les échanges simples. Vos propres journaux doivent départager les modèles.
Les modèles Gemini
Agentkit propose Gemini 3.7 Flash et Gemini 3.1 Pro. D’anciens guides mentionnent encore des versions Flash précédentes. Prenez donc le sélecteur actuel comme référence.
Comparez les deux modèles avec de longs passages, des questions multilingues et des relances si ces tâches comptent pour votre chatbot. Les mentions « Pro » et « Flash » ne remplacent pas une mesure avec la récupération d’Agentkit active.
Construire un test équitable
Un petit jeu de tests fixe donne rapidement des résultats exploitables.
- Réunissez 20 à 30 vraies questions de clients. Ajoutez des questions simples, des formulations ambiguës, des cas sans réponse et des demandes qui doivent déclencher une action ou un transfert.
- Utilisez les mêmes sources, instructions et actions avec chaque modèle.
- Commencez par GPT-6 Sol, puis choisissez au moins un modèle de chaque autre famille.
- Notez l’exactitude, la fidélité aux sources, l’exhaustivité, le ton et le temps de réponse.
- Écartez toute réponse qui invente un détail produit, même si le reste est bien rédigé.
- Rejouez le test après une modification importante des sources ou des instructions.
Une sélection pratique
Si vous ne disposez pas encore d’assez de trafic :
- Gardez GPT-6 Sol comme référence.
- Comparez Claude Sonnet 5 et Gemini 3.7 Flash sur les mêmes questions.
- Ajoutez GPT-5.6 Sol, Claude Opus 5 ou Gemini 3.1 Pro pour les exemples les plus difficiles.
- Incluez GPT-6 Luna ou Claude Haiku 4.5 si vous traitez beaucoup de questions courtes et répétitives.
Vous obtenez ainsi des preuves sur votre chatbot, pas un classement générique des fournisseurs.
Coûts et forfaits
Les forfaits Agentkit utilisent des quotas de messages et n’affichent pas une facture de jetons distincte pour chaque modèle. Les forfaits payants comprennent dix modèles principaux, Pro ajoute GPT-6 Astra et Claude Fable 5.1, tandis que le forfait gratuit utilise une sélection réduite. Consultez les limites actuelles dans le guide des tarifs.
Le changement de modèle s’applique aux conversations suivantes. Vos sources web, documents, paires de questions-réponses et extraits de texte restent inchangés.
Conclusion
Il n’existe pas de vainqueur permanent entre GPT, Claude et Gemini pour tous les chatbots. Le sélecteur actuel d’Agentkit propose douze choix précis. Commencez par GPT-6 Sol, testez une sélection de plusieurs fournisseurs avec de vraies questions et retenez le modèle qui commet le moins d’erreurs importantes.
Examinez les conversations après le lancement. Si le catalogue, votre contenu ou les questions de vos clients changent, rejouez la même évaluation.
Créez votre chatbot gratuitement →
Aucune carte bancaire requise.
