Réponse à un email, comparatif entre Gemini, ChatGPT et Jan.ia

J’ai reçu un e-mail en anglais dans mon Gmail Workspace.

J’ai trouvé que cet e-mail pouvait être un bon test pour générer une réponse avec l’IA intégré Gemini.

Donc voici l’e-mail :

Je lui demande :

comprendre et quelle réponse fournir à cette demande 

Et voici la réponse qu’il me donne, très poli, en français.

Et voici la version ChatGPT, directement en anglais, sans que j’ai eu besoin de préciser.

Bilan

Pour la facilité d’utilisation : Gemini

La réponse de Gemini est intégrer directement dans, et je peux générer l’email rapidement par rapport à ma demande

Pour la qualité de la réponse : ChatGPT

Inconvenant c’est que j’ai du faire 2 copier coller pour avoir la réponse, qui est plus dans l’action

J’ai choisi ChatGPT

Parce que la réponse était bonne du premier coup.

Jan.ia

Ensuite j’ai voulu testé la réponse avec Jan.ia. Pour cela j’ai testé plusieurs modèles d’IA avant de trouver le bon choix.

Par contre j’ai du modifier mon prompt pour qu’il soit plus précis :

Je reçois cet email, et j'ai besoin de le comprendre et de fournir une réponse à leur demande

Je vous laisse juge des 2 meilleures réponses que j’ai obtenu

Version Mistra Nemo 12b

Version Gemma2 9b

La réponse se ressemble, mais la version Gemma2 est directement en anglais sans avoir eu besoin de demander.

J’aurais pu aussi préciser dans mon prompt que je voulais le résultat en anglais.

Impact matériel

Pour lancer ces opérations qui ont été rapide, mais cela à un impact sur ma machine. Je n’ai pas fermée mes autres applications pour faire mes tests (345 processus en cours).

Les autres test avec Jan.ia

Comme toujours, le choix du bon modèle est indispensable, mais pour avoir le bon modèle il faut faire beaucoup de test, et avoir de la place sur son disque dur.

Je note que dans de très nombreux cas les IA ci dessous n’ont pas compris que j’étais le client qui devait faire parvenir ses coordonnées au fournisseur.

Deepseek R1 llama 8b

Phi-4

Qwen3:4b et Qwen3:8b

Bon j’ai un problème entre Jan.ia et Qwen3. J’ai essayer de désinstaller Qwen3, changer de version du modèle, vérifier que j’ai la dernière version de Jan.ia toujours le même résultat.