Catégorie : Benchmark
-
Natural Questions
Parmi les nombreux benchmarks retenus pour comparer les performances de Llama 2 à ses concurrents, Natural Questions est le troisième cité dans l’article de présentation du logiciel. Note de Llama 2 / Natural Questions La note obtenue par Llama 2 pour ce benchmark est de 33 pour la version 70B, ce qui le classe en…
-
TriviaQA
Parmi les nombreux benchmarks retenus pour comparer les performances de Llama 2 à ses concurrents, TriviaQA est le deuxième cité dans l’article de présentation du logiciel. Note de Llama 2 / TriviaQA La note obtenue par Llama 2 pour ce benchmark est de 85 pour la version 70B, ce qui le classe en 2ème position,…
-
MMLU
Parmi les nombreux benchmarks retenus pour comparer les performances de Llama 2 à ses concurrents, MMLU est le premier cité dans l’article de présentation du logiciel. Note de Llama 2 / MMLU La note obtenue par Llama 2 pour ce benchmark est de 68,9 pour la version 70B, ce qui le situe approximativement au niveau…