MultimediaN E-Culture en Prenten Kabinet Online Vragenlijst voor subject annotatie Mei 2008
Een onderdeel van het invoeren van de objecten is het vastleggen van de onderwerpsontsluiting; ook wel subject annotatie genoemd. De subject annotatie is gedaan met een prototype van MultimediaN E-Culture. Deze questionnaire ondervraagd u over het gebruik van dit prototype. Geeft u alstublieft zo eerlijk en uitgebreid mogelijk antwoord. Neem in ogenschouw dat we het prototype testen en niet u. We zullen u nu per annotatie veld (Wie, Wat, Waar en Wanneer) een aantal vragen stellen. Daarna volgen een aantal algemene vragen over het prototype en uw achtergrond.
1
Wie veld - historische personen 1. Hoe zeker was u tijdens de test dat de geselecteerde naam ook de persoon was die u bedoelde? heel onzeker
1
2
3
4
5
heel zeker
verklaar u nader:
2. Was bij elke geselecteerde suggestie duidelijk uit welke thesaurus deze kwam? nooit duidelijk
1
2
3
4
5
altijd duidelijk
verklaar u nader:
3. Heeft u termen geselecteerd uit een andere thesaurus dan de Rijksmuseum personen thesaurus? nee ja Zo ja, verklaar waarom:
2
4. In de lijst met suggesties werd naast de naam ook andere informatie over de persoon weergegeven (mits beschikbaar).
(a) Hoe belangrijk vond u de volgende informatie om een potentieel relevante naam snel te herkennen uit de gesuggereerde personen? Geef een volgorde aan van 1 tot 5, waarin u de belangrijkste informatie een 1 geeft en de minst belangrijke een 5. Verklaar u nader voor elke keuze.
a
b
informatie verkorte biografische beschrijving
volgorde
reden
aanvullende tekstuele beschrijving
c
bron: RMA personen database ULAN, Wikipedia d voorbeelden van andere afbeeldingen van deze persoon e het totaal aantal afbeeldingen van deze persoon in de RMA collectie Mist u nog informatie die u nuttig acht bij het identificeren van de juiste persoon?
3
5. Sommige namen komen in meerdere thesauri voor. In een aantal gevallen herkent het systeem dat deze refereren naar een en dezelfde persoon. In zo’n geval wordt de persoon als een enkele suggestie getoond.
(a) Herinnert u zich gevallen waarin dit voorkwam? nee ja Zo ja, hoe nuttig was het om te zien dat een naam in meerdere thesauri voorkwam? 1 2 3 4 5 helemaal niet nuttig zeer nuttig verklaar u nader:
(b) In andere gevallen kan het systeem niet herkennen dat deze refereren naar een en dezelfde persoon. In zo’n geval worden er meerdere suggesties voor dezelfde persoon getoond.
Herinnert u zich gevallen waarin dit voorkwam? nee ja Zo ja, hoe storend waren de namen die meerdere malen gesuggereerd werden, omdat het systeem niet herkende dat deze dezelfde persoon betroffen? 1 2 3 4 5 niet storend zeer storend verklaar u nader:
4
6. De persoonsnamen worden gesorteerd op alfabetische volgorde. Was de volgorde van de suggesties nuttig in het gebruik? helemaal niet nuttig
1
2
3
4
5
heel nuttig
verklaar u nader:
7. Het is mogelijk om meerdere woorden te gebruiken om een persoon te vinden. Bijvoorbeeld door te zoeken op zowel de voor- en achternaam. Heeft u hiervan gebruik gemaakt? nee ja Zo ja, waren de suggesties dan relevant? helemaal niet relevant
1
2
3
4
5
zeer relevant
verklaar u nader:
5
2
Wat veld - Iconclass, gebeurtenissen, etc. 1. Hoe zeker was u tijdens de test dat de geselecteerde suggestie ook de term was die u bedoelde? heel onzeker
1
2
3
4
5
heel zeker
verklaar u nader:
2. Was het nuttig dat de suggesties uit verschillende thesauri in aparte groepen werden weergegeven? helemaal niet nuttig
1
2
3
4
5
zeer nuttig
verklaar u nader:
3. Was bij elke geselecteerde suggestie duidelijk uit welke thesaurus deze kwam? nooit duidelijk
1
2
3
4
5
altijd duidelijk
verklaar u nader:
6
4. In de lijst met suggesties werd naast de term zelf ook andere informatie over de term weergegeven (mits beschikbaar). (a) Hoe belangrijk vond u de volgende informatie om een potentieel relevante term snel te herkennen uit de gegeven suggesties? (zie volgende pagina)
Iconclass
Geef een volgorde aan van 1 tot 5, waarin u de belangrijkste informatie een 1 geeft en de minst belangrijke een 5. Verklaar u nader voor elke keuze. informatie volgorde reden a Iconclass notatie (code) b Iconclass group (hoofd van de hierarchie) c exacte plaats in de hierarchie d
voorbeelden van andere van andere werken geannoteerd met deze term e het totaal aantal werken geannoteerd met deze term Mist u nog informatie die u nuttig acht bij het identificeren van de juiste term?
7
Wordnet
Geef een volgorde aan van 1 tot 4, waarin u de belangrijkste informatie een 1 geeft en de minst belangrijke een 5. Verklaar u nader voor elke keuze. informatie volgorde reden a algemene term
b
synoniem
c
tekstuele beschrijving
d
plaats in de hierarchie
Mist u nog informatie die u nuttig acht bij het identificeren van de juiste term?
8
5. De WordNet suggestie worden gesorteerd op basis van het aantal keer dat ze gebruikt worden in de engelse taal. Was de volgorde van de WordNet suggesties nuttig in het gebruik? helemaal niet nuttig
1
2
3
4
5
heel nuttig
verklaar u nader:
6. Van de IconClass suggesties worden in eerste instantie alleen hoogste termen in de hierarchie getoond. Was de volgorde van de IconClass suggesties nuttig in het gebruik? helemaal niet nuttig
1
2
3
4
5
heel nuttig
verklaar u nader:
7. Het is mogelijk om meerdere woorden te gebruiken om een term te vinden. Heeft u hiervan gebruik gemaakt? nee ja Zo ja, waren de suggesties dan relevant? helemaal niet relevant
1
2
3
4
5
zeer relevant
verklaar u nader:
9
3
Waar veld - Naam van plaats of land 1. Hoe zeker was u tijdens de test dat de geselecteerde naam ook de plaats was die u bedoelde? heel onzeker
1
2
3
4
5
heel zeker
verklaar u nader:
2. Was bij elke geselecteerde suggestie duidelijk uit welke thesaurus deze kwam? nooit duidelijk
1
2
3
4
5
altijd duidelijk
verklaar u nader:
3. De suggesties worden gesorteerd op basis van het aantal keer dat ze gebruikt zijn in voorgaande annotaties. Was de volgorde van de suggesties nuttig in het gebruik? helemaal niet nuttig
1
2
3
4
5
heel nuttig
verklaar u nader:
10
4. In de lijst met suggesties werd naast de naam ook andere informatie over de plaats weergegeven (mits beschikbaar).
(a) Hoe belangrijk vond u de volgende informatie om een potentieel relevante plaats snel te herkennen uit de gegeven suggesties? Geef een volgorde aan van 1 tot 5, waarin u de belangrijkste informatie een 1 geeft en de minst belangrijke een 5. Verklaar u nader voor elke keuze.
a
informatie plaats type
b
aanvullende tekstuele beschrijving
c
bron: TGN, RMA plaats thesaurus
d
voorbeelden van andere afbeeldingen van deze plaats het totaal aantal afbeelding van deze plaats in de RMA collectie plaats in de hierarchie
e
f
volgorde
reden
Mist u nog informatie die u nuttig acht bij het identificeren van de juiste plaats?
11
5. Sommige plaatsnamen komen in meerdere thesauri voor. In een aantal gevallen herkent het systeem dat deze refereren naar een en dezelfde plaats. In zo’n geval wordt de plaats als een enkele suggestie getoond. (a) Herinnert u zich gevallen waarin dit voorkwam? nee ja Zo ja, hoe nuttig was het om te zien dat een plaatsnaam in meerdere thesauri voorkwam? 1 2 3 4 5 helemaal niet nuttig zeer nuttig verklaar u nader:
(b) In andere gevallen kan het systeem niet herkennen dat deze refereren naar een en dezelfde plaats. In zo’n geval worden er meerdere suggesties voor dezelfde plaats getoond. Herinnert u zich gevallen waarin dit voorkwam? nee ja Zo ja, hoe storend waren de plaatsnamen die meerdere malen gesuggereerd werden, omdat het systeem niet herkende dat deze dezelfde plaats betroffen? 1 2 3 4 5 niet storend zeer storend verklaar u nader:
6. Het is mogelijk om meerdere woorden te gebruiken om een plaats te vinden. Bijvoorbeeld door te zoeken op de naam van stad en de naam van het land. Heeft u hiervan gebruik gemaakt? nee ja Zo ja, waren de suggesties dan relevant? 1 2 3 4 helemaal niet relevant
5
verklaar u nader:
12
zeer relevant
4
Wanneer veld
In het wanneer veld werd autocompletion niet gebruikt om suggesties te geven. 1. Heeft u suggesties voor het gebruik van autocompletion in dit veld?
13
5
Annotatie algemeen 1. Was het voor elke annotatie duidelijk welk veld daarvoor gebruikt moest worden? helemaal niet duidelijk
1
2
3
4
5
zeer duidelijk
verklaar u nader:
2. Welke functionaliteit miste u in het prototype? Denkt u bijvoorbeeld aan funtionaliteit die u handig vindt in Adlib of de IconClass browser.
3. Wat vindt u de voordelen van het prototype?
4. Heeft u verder nog opmerkingen of suggesties?
14
6
Autocompletion
Autocompletion is een techniek waarbij het systeem suggesties geeft terwijl u karakters invoert. Het prototype maakt gebruik van autocompletion om termen uit thesauri te suggereren. Wij zijn ge¨ınteresseerd in uw ervaring met autocompletion voor dat u het prototype ging gebruiken. 1. Heeft u ervaring met autocompletion? nee (u kunt de onderstaande vragen overslaan) ja 2. Hoeveel ervaring heeft u met autocompletion in email? weinig ervaring
1
2
3
4
5
veel ervaring
3. Hoeveel ervaring heeft u met autocompletion in zoekmachines (b.v. Google suggest)? weinig ervaring
1
2
3
4
5
veel ervaring
15
4. Hoeveel ervaring heeft u met autocompletion in uw browser? weinig ervaring
1
2
3
4
5
veel ervaring
5. Heeft u ervaring met autocompletion in andere applicaties? Zo ja, geef de naam/beschrijving van de applicatie en uw ervaring. (a)
weinig ervaring
1
2
3
4
5
veel ervaring
weinig ervaring
1
2
3
4
5
veel ervaring
weinig ervaring
1
2
3
4
5
veel ervaring
(b)
(c)
6. Hoe nuttig vindt u autocompletion in het algemeen? helemaal niet nuttig
1
2
3
4
5
zeer nuttig
verklaar u nader:
16
7
Algemeen 1. Wat is uw rol binnen het Rijksmuseum?
2. Hoeveel jaar bent u in dienst bij het Rijkmuseum? jaar 3. Hoeveel jaar ervaring heeft u met annotatie? jaar 4. Hoeveel dagen per week besteedt u tegenwoordig aan annotatie? dagen 5. Wat is het soort kunstwerken dat u doorgaans annoteert?
6. Wilt u op de hoogte worden gehouden van de resultaten van dit onderzoek? nee ja Zo ja, email: 7. De resultaten van dit onderzoek zullen strikt vertrouwelijk worden behandeld en alleen voor wetenschappenlijke doeleinden. Geeft u hier toestemming voor? nee ja Heel erg bedankt voor uw medewerking! Heeft u nog vragen dan kan u concact op nemen via:
[email protected]
17
