Nieuw platform maakt AI-vergelijking op eigen bedrijfsdata mogelijk

Artificial Analysis heeft een nieuwe dienst genaamd Optima uitgebracht, waarmee bedrijven de prestaties van kunstmatige intelligentie kunnen meten aan de hand van hun eigen datasets. Organisaties kunnen hiermee maatstaven opstellen die aansluiten bij hun specifieke bedrijfstaken. Dit maakt het mogelijk om taalmodellen niet langer uitsluitend te beoordelen op algemene benchmarks, maar gericht te testen op praktijksituaties binnen de eigen organisatie.

Gerichter kiezen voor de juiste technologie

Bij de inzet van generatieve kunstmatige intelligentie is de keuze voor het juiste model vaak complex. Algemene prestatietests geven doorgaans een brede indicatie van de kwaliteit, maar zeggen weinig over hoe een systeem presteert onder specifieke bedrijfsomstandigheden of bij niche-taken. Bedrijven tasten hierdoor regelmatig af hoeveel capaciteit en rekenkracht ze nodig hebben voor hun specifieke toepassingen.

Met systemen die prestaties koppelen aan bedrijfseigen data ontstaat er meer inzicht in de operationele afwegingen. Naast de kwaliteit van de gegenereerde antwoorden spelen ook de operationele kosten en de verwerkingssnelheid een doorslaggevende rol bij het integreren van taalmodellen in bestaande bedrijfsprocessen. Door deze factoren vooraf te testen op maat, kunnen organisaties efficiënter keuzes maken in het brede landschap van beschikbare technologieën.