Claude 3, l’IA plus « forte » que GPT-4 selon les benchmarks techniques d’Anthropic vient de sortir. Je te montre dans cette vidéo comment tester gratuitement en France ses 2 modèles les plus puissants : Claude 3 Opus et Claude 3 Sonnet.
Claude 3 meilleur que GPT 4 ?
Selon les benchmarks réalisés par Anthropic, le modèle Opus de Claude 3 surpasserait GPT-4 dans plusieurs domaines, notamment le raisonnement mathématique, le codage et les quiz/questionnements.
Claude 3 semble particulièrement performant pour le code, comme le montre les résultats en vert dans les tests.
Claude 3 Sonnet vs Mistral Large (le match)
Dans cette vidéo, des tests sont effectués pour comparer les performances de Claude 3 Sonnet (version gratuite) et Mistral Large (un autre modèle de langage) sur différents types de requêtes.
Claude 3 Sonnet semble avoir quelques difficultés sur certaines questions de culture générale ou impliquant de la compréhension, tandis que Mistral Large s’en sort mieux.
Les Limites de Claude AI
L’interface en ligne de claude.ai a une limitation du nombre de requêtes pouvant être effectuées gratuitement (une vingtaine). De plus, la reconnaissance d’écriture manuscrite semble encore limitée pour Claude 3, bien qu’il excelle sur les documents textuels PDF tapés au clavier (y compris les images).
Claude 3 Vision
Les tests montrent que Claude 3 gère plutôt bien l’analyse d’images simples comme des captures d’écran ou des graphiques.
Claude 3 analyse le texte
Un point fort de Claude 3 semble être son excellente capacité à analyser et résumer des documents textuels, que ce soit des PDF ou des transcriptions. Il est également plutôt doué pour coder et créer des pages web à partir de texte.
Tester Claude 3 Opus en France
Bien que l’accès gratuit à l’interface de Claude.ai semble plus compliqué depuis la France, il est possible de tester la version Opus (plus puissante) de Claude 3 en créant un compte API Anthropic qui offre un crédit de 5$ à l’inscription.
Les premiers tests de cette version Opus sont prometteurs, notamment pour les analyses économiques.
Mistral AI ou Claude AI
En conclusion, si Claude 3 Opus semble très performant pour le code, l’analyse de textes et de données économiques, Mistral AI pourrait avoir un petit avantage pour les requêtes de culture générale en français. L’utilisation combinée des deux modèles en fonction des besoins semble être une stratégie pertinente.