Německá Aleph Alpha vydala jazykový model Kolibri a zpřístupnila jeho váhy na Hugging Face pod licencí Apache 2.0. Model je určený pro němčinu a angličtinu, zejména pro podniky a veřejnou správu, které chtějí provozovat AI na vlastní infrastruktuře. Využívá architekturu Mixture-of-Experts: celkem má přibližně 78 miliard parametrů, při zpracování jednotlivého tokenu se ale aktivuje jen jejich menší část, zhruba tři miliardy. Podporuje kontext až jeden milion tokenů. Vývoj probíhal v Německu a trénink na infrastruktuře v Německu a Finsku. Součástí zveřejnění je podrobný technický popis tréninku i výsledky firemních testů. Ty je vhodné číst jako měření vývojáře, nikoli jako nezávislé ověření výkonu. Kolibri rozšiřuje nabídku evropských modelů s dostupnými vahami a možností vlastního nasazení.
Aleph Alpha vydala otevřený model Kolibri pro němčinu a angličtinu
Aleph Alpha vydala Kolibri s otevřenými vahami pro němčinu a angličtinu. Model lze provozovat na vlastní infrastruktuře.