Workshops betapartnersconferentie

2. MediaLab: Zoeken in Video

Doutzen Abma

Op de Universiteit van Amsterdam en op de Vrije Universiteit worden its labs voor informatica ontwikkeld. Leerlingen van 5 VWO gaan een dagdeel naar de universiteit toe om daar zelf een lab uit te voeren, onder begeleiding van studenten.

Tijdens de bijeenkomst van het steunpunt informatica maakt u kennis met het MediaLab: zoeken in video.

Figuur 1a) Zoeken naar doelpunten in voetbal-wedstrijden met de MediaMill video zoekmachine.

In dit MediaLab maken leerlingen kennis met nieuwe manieren van zoeken in video die gebaseerd zijn op geavanceerde spraak- en beeldherkenning technologie ontwikkeld aan de Universiteit van Amsterdam. Tijdens het MediaLab worden deze technieken kort uitgelegd, met nadruk op de complexiteit van het probleem, de huidige oplossingen, de hoeveelheid rekentijd die nodig is om de video te analyseren, evaluatie van de kwaliteit, en de noodzaak voor interactie met behulp van nieuwe visualisaties. Leerlingen maken kennis met al deze aspecten door zelf te zoeken met het prototype van de MediaMill video zoekmachine (zie figuur 1a).

Na een introductie gaan leerlingen op zoek naar specifieke videofragmenten in honderd uur aan televisiemateriaal van het Nederlands Instituut voor Beeld en Geluid, onder andere bestaande uit Klokhuis, Zembla, Noorderlicht, en School TV weekjournaal uitzendingen. Aan de hand van diverse complexe zoekvragen zoals “vind fragmenten van de kok Alberdinck Thijn uit klokhuis” en “vind fragmenten waar iemand aan het telefoneren is” maken ze kennis met de kracht en beperkingen van bestaande zoektechnieken.

Figuur 1b) VideOlympics scorebord voor real-time evaluatie van video zoekresultaten gevonden door leerlingen, met correcte (groen) verkeerde (rood) en onbekende resultaten (grijs) gemerkt.

We sluiten het MediaLab af met de VideOlympics, een wedstrijd zoeken in video. Alle leerlingen gebruiken hierbij een eigen versie van de MediaMill zoekmachine en moeten tegelijkertijd zo snel en zo veel mogelijk correcte fragmenten vinden aan de hand van een aantal complexe zoekvragen. De resultaten worden in real-time teruggekoppeld met behulp van een groot digitaal scorebord (zie figuur 1b). De beste leerling krijgt een prijs, maar uiteindelijk winnen alle leerlingen: ze gaan met meer begrip van video zoekmachines en de achterliggende wetenschap naar huis.