Redactie InformatieProfessional

Zoekmachine vertaalt pixels naar tekst.

Vandaag is www.hollandsglorieoppinkpop.nl gelanceerd, een experimentele videozoekmachine rondom 40 jaar Pinkpop. Met behulp van Nederlandse technologie kan via deze website gebrowsed worden door videofragmenten van optredens en interviews op Pinkpop. Automatische beeld- en spraakherkenning neemt de gebruiker op een nieuwe manier bij de hand. De website laat op deze manier zien hoe multimediatechnologie ons in de nabije toekomst kan helpen de weg te vinden in het enorme aanbod van online video.

De technologie achter de site is ontwikkeld door het Beeld en Geluid-project Beelden voor de Toekomst en nationaal onderzoeksproject MultimediaN, met partners Universiteit van Amsterdam, Universiteit Twente en Video Dock. De technologie is de afgelopen vijf jaar veelvuldig als beste getest in internationale competities en is nu voor het eerst toegankelijk voor het grote publiek. De zoekmachine vertaalt pixels naar tekst en is daarom in staat om objecten in het beeld, zoals 'gitarist' en 'drummer', automatisch te benoemen. De machine leert op basis van vele voorbeelden het verband tussen een visueel object en duizenden vorm-, kleur- en structuurkenmerken. Gebruikers kunnen razendsnel naar verschillende benoemde objecten in de concertvideo navigeren door een speciaal ontwikkelde videoplayer die deze objecten op een tijdlijn weergeeft. Naast het zoeken in Pinkpopconcerten, kunnen gebruikers ook zoeken in interviews van Nederlandse artiesten met behulp van automatische spraakherkenning.

De gebruiker wordt uitgedaagd om actief terugkoppeling te geven op de automatische behaalde resultaten, bijvoorbeeld door het label 'drummer' vervangen door 'toetsenist'. Met deze input van gebruikers kan vervolgens het automatische herkenningsproces verder worden verbeterd. Ook kunnen de gebruikers commentaar toevoegen in de vorm van tekst om de doorzoekbaarheid van dit Pinkpopmateriaal nog verder te vergroten.

De videozoekmachine zal tot eind februari 2010 online zijn.

(Foto van Ashley Webb)