Nieuw ontwikkelingskader voor efficiëntere taalmodellen
Het Allen Institute for AI heeft Olmo-core 3 uitgebracht, een nieuw framework voor het trainen van grootschalige taalmodellen. Deze methode richt zich op het efficiënter schalen van systemen met een zogeheten mixture-of-experts-architectuur tot miljarden parameters.
Onderzoeksorganisatie Ai2 heeft een nieuw ontwikkelingskader gepresenteerd onder de naam Olmo-core 3. Deze software is specifiek ontworpen om de training van complexe taalmodellen te verbeteren en te versnellen.
Efficiëntie bij gigantische neurale netwerken
Het trainen van geavanceerde kunstmatige intelligentie vereist enorme hoeveelheden rekenkracht en energie. De introductie van frameworks die specifiek zijn geoptimaliseerd voor een mixture-of-experts-architectuur helpt ontwikkelaars om de kosten binnen de perken te houden. Binnen de AI-wereld is het verlagen van de benodigde computercapaciteit een continu aandachtsgebied om schaalvergroting haalbaar te houden voor meer onderzoeksgroepen.
Deze samenvatting is gebaseerd op een origineel artikel van SiliconANGLE AI. Lees het volledige, originele bericht bij de bron.
Lees het originele artikel