BigScience Language Open-science Open-access Multilingual
Tipus | model de llenguatge i model de llenguatge extens |
---|---|
Versió inicial | 2021 |
Llicència | Responsible AI License (en) |
Més informació | |
Lloc web | bigscience.huggingface.co (anglès) |
| |
BigScience Language Open-science Open-access Multilingual o BLOOM és un model d'intel·ligència artificial de codi obert i accés lliure. El model obert i multillenguatge conté uns 176.000 milions de paràmetres i s'ha entrenat amb 1,5 terabytes de text. BLOOM és una mica més gran que GPT-3 (175.000 milions de paràmetres), però a diferència d'aquest model BLOOM no té com a principal interès tenir un model comercial darrere.[1]
El seu desenvolupament sorgí a partir de la unió de 1.000 investigadors dedicats a la intel·ligència artificial, que s'organitzaren a través de Hugging Face,[2] la principal plataforma i comunitat entorn de la IA. A més, també hi han col·laborat més de 250 institucions en un projecte iniciat a principis de 2021.
El model de BLOOM fou entrenat a França amb el supercomputador Jean Zay, el qual fou finançat amb fons públics per valor de 7 milions de dòlars i els resultats foren publicats a mitjans de juny.[3]
Referències
[modifica]- ↑ Pérez, Enrique «Las IA tienen un problema: son opacas y cerradas. BLOOM es el gran proyecto open source que quiere cambiarlo todo». Xataka, 10-07-2022 [Consulta: 11 juliol 2022].
- ↑ Belkada, Younes «initial commit · bigscience/bloom at 0b49f22». Hugging Face, 19-05-2022 [Consulta: 11 juliol 2022].
- ↑ Gibney, Elizabeth «Open-source language AI challenges big tech’s models». Nature, 22-06-2022 [Consulta: 11 juliol 2022].