Visual recognition voor erfgoedcollecties. Eindrapport

Auteur

Henk Vanstappen (Datable)
Met dank aan Nastasia Vanderperren (PACKED/VIAA) en Dieter Suls (ModeMuseum Antwerpen)

Download

Je kunt het rapport download door HIER te klikken.

Abstract

VR4CH was een innovatief partnerproject dat in 2018-2019 uitgevoerd werd door het MoMu, datable en PACKED met een subsidie van de Vlaamse Gemeenschap. Het doel van het project was te onderzoeken in welke mate online beeldherkenningservices (VRS) kunnen worden ingezet bij het doorzoekbaar maken van beeldcollecties uit de erfgoedsector.
Dit verkennend onderzoek gaf een inzicht in het aanbod en de werking van de VRS. Uit analyse van de resultaten bleek dat door een VRS gegenereerde descriptoren vaak voldoende specifiek zijn om verkennende zoekopdrachten mogelijk te maken, en dit tegen een relatief lage kostprijs en hoge snelheid. Naar aard bleken de descriptoren vaak andere invalshoeken te gebruiken om een beeld te beschrijven. Mede op basis van deze laatste conclusie werden een aantal meer specifieke use cases beschreven die het voorwerp kunnen zijn van verder onderzoek.
In het rapport worden de typologie en de werking van de VRS beschreven. Vervolgens wordt de gehanteerde methodologie beschreven voor het testen van de VRS, gevolgd door een beoordeling en conclusie.

Inhoudstafel

• 1. Management samenvatting
• 2. Inleiding
• 3. VRS services
• 3.1. Descriptoren
• 3.2. Modellen en training
• 3.3. Interactie
• 3.4. Vereisten beeldmateriaal
• 3.5. Kosten
• 3.6. Selectie VRS
• 4. Methodologie en uitvoering
• 4.1. Selectie materiaal
• 4.2. Set-up van de workflows
• 5. Beoordeling
• 5.1. Kwantitatieve resultaten
• 5.2. Type descriptoren
• 5.3. Kwalitatieve beoordeling
• 5.4. Ruis
• 5.5. Granulariteit
• 5.6. Snelheid
• 6. Conclusies
• 6.1. Conclusies cases study
• 6.2. Inzetbaarheid van VRS voor erfgoedcollecties
• 6.3. Use cases
• 6.4. Toepasbaarheid en verder onderzoek
• 7. Addenda
• 7.1. Overzicht VRS
• 7.2. Tabel: top 20 descriptoren per VRS model en menselijk descriptoren
• 7.3. Tabel: verhouding correcte descriptoren op totaal (ruis)
• 7.5. Voorbeelden geanalyseerde beelden
• 7.6 Voorbeelden van use cases
• 8. Bronnen