Google ontwikkelt video-AI voor ondersteuning tijdens werk

Een onderzoeksteam onder leiding van Google heeft StreamVibe ontworpen, een AI-agent die meeekijkt bij praktische taken zoals koken of meubels in elkaar zetten. Uit tests blijkt echter dat het voor huidige modellen nog lastig is om exact het juiste moment te bepalen waarop hulp gewenst is.
Het experimentele systeem StreamVibe is in het leven geroepen om handelingen van mensen te observeren via videobeelden. De bedoeling is dat de software alleen ingrijpt en advies geeft wanneer dat daadwerkelijk nodig is tijdens een fysieke taak. Uit een bijbehorende evaluatie blijkt echter dat het voor de geteste systemen een flinke uitdaging blijft om in langere videoreeksen precies het juiste moment te herkennen. Fouten stapelen zich snel op, waardoor de kwaliteit van de reacties hard achteruitgaat.
Multimodale kunstmatige intelligentie, die zowel tekst als beeld kan verwerken en begrijpen, is een belangrijk veld binnen de technologieontwikkeling. Het vermogen om real-time visuele informatie te interpreteren en hier nuttige acties aan te koppelen, staat nog in de kinderschoenen. Onderzoek naar dit soort agenten laat zien dat het contextualiseren van handelingen in de echte wereld technisch complexer is dan het verwerken van statische tekst.
Deze samenvatting is gebaseerd op een origineel artikel van The Decoder. Lees het volledige, originele bericht bij de bron.
Lees het originele artikel