Chat GPT vs Le Chat de Mistral AI
Sommaire
Le 26 février, Mistral AI annonçait Le Chat, son IA conversationnelle, concurrent direct de Chat GPT. 💻🆕
Nous avons souhaité effectuer quelques essais avec ce nouvel acteur afin de découvrir son potentiel. Mistral AI a tout de même précisé que son outil était encore en phase de Bêta et qu’il pouvait inclure des erreurs dans ses réponses. Nous allons donc être indulgent et ne pas sortir les griffes tout de suite.
Plusieurs modèles pour le Chat de Mistral AI😺😸😼
La start-up Française met à disposition 3 versions de son modèle d’IA conversationnel. 🗣️ Celui-ci ayant été conçu pour être facilement intégré dans une variété d’applications, telles que les assistants virtuels📎, les chatbots et les systèmes de réponse automatique entre autres.
En tant qu’entreprise, le choix de la version dépendra de vos besoins et de vos ressources :
- Large : La version la plus complète et la plus performante mais aussi la plus gourmande.
- Next : Cette version propose des réponses plus concises, sans fioritures.
- Small : La version la plus rapide et la plus économique en ressources.
La version Large est présentée comme concurrente à Chat GPT. Elle présente les meilleures capacités, cependant, elle est plus lente dans sa rédaction et nécessitera plus de ressources pour la faire fonctionner en entreprise.🏢⚙️
Comparaison entre les deux IA 😺⚡🤖
Pour ces premiers essais, nous avons repris les même prompts sur les deux modèles d’IA conversationnels et avons comparés la vitesse de rédaction, la mise en forme et la qualité des réponses.
Avec un prompt demandant de générer des idées de publications pour Instagram sur le thème « 5 conseils pour bien réussir ses visuels » :
Autre exemple avec un prompt demandant de générer des publications sur un thème plus ouvert tel que l’ « Intelligence Artificielle » :
On remarque que pour chaque requête, la présentation et la longueur des réponses sont similaires dans les deux exemples.
La différence principale se remarque sur la vitesse de rédaction des réponses. Chat GPT est beaucoup plus rapide que Le Chat dans sa version « Large ».
On note également que selon le prompt, Le Chat peut mal comprendre la requête et ne pas répondre complètement. La demande était de rédiger 5 publications à destination de Instagram en donnant « 5 conseils pour bien réussir ses visuels » et en utilisant les hashtags adaptés.
Là où Chat GPT à bien fourni 5 publications différentes incluant 5 conseils. Le Chat lui a donné 5 publications comprenant qu’un seul conseil à chaque fois.
Des améliorations à prévoir pour Le Chat 🛠️🐛
Le Chat a parfois répondu en anglais à nos prompts écrits en français. 🗣️🇬🇧
Cela peut être corrigé en modifiant légèrement le prompt d’origine et en générant une nouvelle réponse. Il faudra parfois répéter l’opération plusieurs fois avant que ce matou capricieux ne se décide à rédiger ses réponses dans la langue de Molière.
L’affichage de la réponse peut parfois se trouver au dessus de notre prompt. Heureusement, l’erreur est détectée et corrigée dès la fin de la rédaction de la réponse par notre IA française.
Nous ne doutons pas que ce genre de bugs seront corrigés pour la sortie de la V1.
Il est impossible de renommer les conversations avec le modèle de Mistral AI. Son rival, Chat GPT, renomme automatiquement les conversations avec un intitulé qui résume le sujet de la première requête. Cela permet, lorsque vous revenez quelques semaines plus tard, de cerner rapidement les sujets de vos précédentes conversations.
Le Chat affiche les premiers mots de la requête. Ce n’est vraiment pas pratique lorsque vous commencez plusieurs prompts par les même premiers mots. Très vite, vos conversations se ressemblent toutes et il devient très compliqué de s’y retrouver.
On espère que cette simple fonctionnalité sera rapidement ajoutée afin d’y voir plus clair dans les multiples discussions.
Un concurrent très solide mais perfectible 💪🔜
Pour résumer, nos premiers tests ont été très positifs. Le Chat est un concurrent sérieux à Chat GPT dans de nombreuses situations. Les réponses à nos requêtes sont très proches de celles données par le modèle d’Open AI. 🆒
La réelle différence réside dans la vitesse de rédaction de la version Large, présentée comme la version concurrente de Chat GPT et qui pour l’instant tient plus de la tortue que du lièvre mais nous verrons qui gagne la course à l’arrivée. 🐇🐢🏁
Cependant, nous observons quelques problèmes avec la gestion des langues ainsi que dans l’expérience utilisateur. Nous espérons que Mistral AI réagira vite afin de régler ces soucis mineurs et améliorer encore son outil.
Allez vite découvrir ce nouvel animal et testez la puissance de l’IA à la française 🤖🇫🇷
Source : Mistral AI
