Pourquoi Llama 2

Llama pour « Large Language Model Meta AI », le nom est bien choisi. La première version a été annoncée en février 2023 et la version 2, Llama 2, en juillet 2023.

Entre-temps, Stanford, avait sorti Alpaca :

We are releasing our findings about an instruction-following language model, dubbed Alpaca, which is fine-tuned from Meta’s LLaMA 7B model. 

https://crfm.stanford.edu/2023/03/13/alpaca.html

Alpaca est open source, mais avec une licence restrictive qui interdit des fins commerciales.

L’objectif d’Alpaca est principalement pédagogique.

En mars 2023, nous avons aussi eu, de la part d’étudiants de UC Berkeley, Vicuna :

We introduce Vicuna-13B, an open-source chatbot trained by fine-tuning LLaMA on user-shared conversations collected from ShareGPT.

https://lmsys.org/blog/2023-03-30-vicuna/

Llama (le lama), Alpaca (l’alpaga), Vicuna (la vigogne), ont des caractéristiques similaires :

La vigogne (Vicugna vicugna) est une espèce de mammifères d’Amérique du Sud qui vit sur les hauts plateaux de la cordillère des Andes. Tout comme l’alpaga, la vigogne appartient au genre Vicugna, au sein de la famille des camélidés. Une étude récente montre que, malgré quelques croisements, le lama, animal domestique, descend du guanacoanimal sauvage, alors que l’alpaga, animal domestique, descend de la vigogne, animal sauvage. La laine de sa toison particulièrement fine est utilisée pour fabriquer des vêtements de luxe

https://fr.wikipedia.org/wiki/Vigogne


Publié

dans

par