9-9-2013
Limo, exponent van een nieuwe generatie discovery tools
Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
1
Inhoud • • • •
Web scale discovery: wat en waarom ? Implementatie van Limo in K.U.Leuven Gebruikerstesten en gebruiksgegevens Eerste observaties
Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
2
1
9-9-2013
Web scale discovery: waarom ? Diversiteit aan materialen en collecties -
Catalogus Repository (bibliografische) databanken Collecties gedigitaliseerd en “born” digital materiaal
-> nood aan één performante zoekomgeving voor al deze collecties Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
3
Web scale discovery: waarom ? Gebruiksvriendelijkheid van Google en webshops zijn de norm -> roep om een “Next Generation OPAC” met • Verbeterde zoekfunctionaliteit • Web 2.0 technologie • Verrijkte inhoud
Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
4
2
9-9-2013
Federated search kan deze verwachtingen niet inlossen: – Beperkt aantal databanken simultaan te doorzoeken – Relevance ranking verschillend per databank
Web scale discovery : – Centrale index met massale hoeveelheid artikels en e-books gehost door leverancier – Uniforme relevance ranking
– Traag
– Snel
– Complex voor gebruikers
– Eenvoudige zoekbox op elke pagina
Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
5
“Features” van discovery tools • • • • • • • • • • • •
Faceted Search Relevance ranking “Did you mean” Simple keyword search on every page Single point of entry for all library materials State of the art web interface Enriched content Recommendations User contribution RSS Integration with social network sites Persistent links
Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
Bron: Yang S.Q. en Wagner K. : (2010), “Evaluating discovery tools” In: Library Hi Tech Vol. 28 No. 4, 2010 pp. 690-709 6
3
9-9-2013
Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
7
Inhoud • • • •
Web scale discovery: wat en waarom ? Implementatie van Limo in K.U.Leuven Gebruikerstesten en gebruiksgegevens Eerste observaties
Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
8
4
9-9-2013
Catalogus
Onderzoeksrepository Data e-tijdschriften Beschrijvingen databanken Inhoud van DigiTool (later)
Data : - Genormaliseerd - Ontdubbeld (lokale data) - Gelijkaardige records gegroepeerd (FRBR) - Verrijkt Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
9
Implementatie van Limo in K.U.Leuven Bèta release in “Soft launch”
september 2010 maart 2011
Gebruikerstesten
begin mei 2011
Evaluatie, finetuning en nieuwe lay-out Lancering met vervanging van OPAC en LibriSource Plus Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
september 2011 10
5
9-9-2013
Inhoud • • • •
Web scale discovery: wat en waarom ? Implementatie van Limo in K.U.Leuven Gebruikerstesten en gebruiksgegevens Eerste observaties en aanpassingen voor de nieuwe versie
Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
11
Bronnen voor evaluatie • Gebruikerstesten • (Gebruiksgegevens) • Feedback
Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
12
6
9-9-2013
Gebruikerstesten: vragen • •
• • •
Is het duidelijk wat men in Limo kan vinden ? Kunnen gebruikers gemakkelijk – informatie over een onderwerp vinden ? – een gekende publicatie terugvinden ? – de ligplaats van een document in de bibliotheek vinden ? – de full text van een document online raadplegen , – informatie bewaren en exporteren ? Kennen gebruikers alternatieven om documenten op te zoeken die ze niet vonden in Limo ? Zijn de aanmeldprocedures verstaanbaar ? Wordt Limo gezien als een verbetering t.o.v. de huidige zoeksystemen van de bibliotheek ?
Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
13
Gebruikerstesten: methode • Uitgevoerd door U-Sentric, een bedrijf gespecialiseerd in usability-onderzoek • Testers worden gevraagd een reeks taken in Limo uit te voeren en daarbij luidop na te denken (1u / testpersoon) • Onderzoeker observeert: – Hoe wordt de taak uitgevoerd ? – Wat ziet de testpersoon (niet) ? – Lichaamstaal, bedenkingen, ..
• Korte vragenlijst vooraf en achteraf
Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
14
7
9-9-2013
Gebruikerstesten: testscenario 1. Je bent niet op de campus en wilt toch enkele opzoekingen verrichten voor je onderzoek, meld je aan op de website http://limo.libis.be/KULeuven 2. Je wilt graag recente internationale artikels opzoeken over quota voor vrouwen bij de verkiezingen. Hoe ga je te werk? 3. Je zoekt publicaties voor je onderzoek over de relatie tussen videospelletjes en agressief gedrag bij kinderen. Kan je de 5 publicaties kiezen die jou het meest relevant lijken maar ook wetenschappelijk waardevol zijn? 4. Kan je de gevonden publicaties bewaren zodat je later de referenties ervan snel kan terugvinden? 5. …..
Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
15
Testers 5 studenten 5 onderzoekers Ervaring met Limo: • 5 testers: nog nooit mee gewerkt • 3 testers: 1 keer gebruikt • 2 testers: al vaker gebruikt Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
16
8
9-9-2013
Zijn 10 testers genoeg om conclusies te kunnen trekken ?
Bron: Jakob Nielsen, http://www.useit.com/alertbox/20000319.html Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
17
Output • • • •
Impressies van reëel zoekgedrag Lijst van verbeterpunten Feedback over hoe Limo werd ervaren. Geen statistische informatie !
Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
18
9
9-9-2013
Gebruiksgegevens • Periode: Maart – juni • Nog relatief veel testgebruik -> enkel indicatief en ter aanvulling/bevestiging van gebruikerstesten • Bronnen – Gebruiksgegevens Limo – Google Analytics
Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
19
Eerste observaties i.v.m. • • • • •
Eén toegang voor “alle” collecties Facets Relevance ranking FRBR groepering Tags & Reviews
Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
20
10
9-9-2013
Eén toegang tot alle collecties
Geen afzonderlijke tabs voor verschillende collecties
Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
21
Gebruikerstesten voor andere Primo sites •
University of Minnesota
“Several evaluators did not use or see the... tabs above the search box. When the tabs were not used, it lead to searching that was less likely to find the desired results.” •
University of Coventry “Only half of the testers found the Articles tab without prompting. “
Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
22
11
9-9-2013
Info over … wordt niet inhoud van gelezen Limo
Gebruikerstesten:“Ik wist niet wat er doorzoekbaar is” Bezorgdheid bibliotheken: “gaan gebruikers beseffen dat niet alle collecties waarvoor K.U.Leuven een licentie heeft toegankelijk zijn via Limo ? “ “Hoe gemakkelijk een boek terug vinden in de massa’s publicaties ?”
Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
23
Nieuwe versie van Limo
O.m. nieuws over nieuwe collecties
Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
24
12
9-9-2013
Relevance ranking belangrijk ! Aantal zoekresutlaten per unieke zoekactie (maart – juli)
0 1-10 11-100 101-1.000 1.001-10.000 >10.000
> ½ van de zoekacties resulteerde in > 100 zoekresultaten Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
25
Relevance ranking Bepalende factoren in Primo Central: - Matching met zoekvraag - “waarde” van de publicatie, gebaseerd op bX - Interessegebied vd gebruiker (toekomst)
Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
26
13
9-9-2013
Relevance ranking “Force blending” om de fysieke collectie beter vindbaar te maken in de massa publicaties Indien lokale records in zoekresultaat: 1 record komt bovenaan de 1e pagina, 2 komen hoger in de rangschikking.
Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
27
Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
28
14
9-9-2013
Eerste observaties i.v.m. • • • • •
Eén toegang voor “alle” collecties Relevance ranking Facets FRBR groepering Tags & Reviews
Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
29
Om snel bibliotheekitems terug te vinden
Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
30
15
9-9-2013
Gebruik van facets: voordelen • Faciliteert meer flexibele zoekstrategieën • Helpt in formuleren van de zoekvraag en beoordelen van zoekresultaten • Gebruikers voelen zich meer georganiseerd over hun zoekacties • Geeft gebruikers meer controle over zoekresultaat • Minder zoekacties met 0 resultaten Bronnen: Fagan J.C. : (2010), “Usability Studies of Faceted Browsing: A Literature Review” In: Information technology and libraries. June 2010 pp. 58-66. Kules, B., Capra, R., Banta, M., Sierra, T. (2009). “What do exploratory searchers look at in a faceted search interface ?” In: JCDL’09, June 15–19, 2009, Austin, Texas, USA Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
31
Gebruik van facets: issues • Bij omvangrijke resultaatset worden niet alle facetwaarden getoond. -> facets gerangschikt volgens aantal zoekresultaten • Geen uniformiteit in toekenning topics, schrijfwijze van auteursnamen -> aantal facets geeft info over de inhoud van het zoekresultaat maar minder efficiënt als filter
Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
32
16
9-9-2013
Gebruik facets in Limo • Gebruikerstesten: meerderheid van de proefpersonen gebruikten facets • Google Analytics: sessies met gebruik van facets
Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
33
Gebruik van facets in Limo (maart – juni 2011)
Resource type Top level Creation date Library Topic Creator Language Journal title Domain
Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
34
17
9-9-2013
Gebruik facet Resource type (maart – juni 2011)
Articles Books Journals Reviews Dissertations Other
Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
35
Gebruik top facets (maart – juni 2011) Online Resources In LIBISnet Catalogue
Facet “In LIBISnet Catalogue”: minder gebruikt dan Resource type: books
Peer reviewed Cited in WoS
Gebruikerstesten: top facets worden niet goed opgemerkt, gebruikers verwachten ze bij de andere facets, links op het scherm
Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
36
18
9-9-2013
Nieuwe versie
Alle facets links op het scherm “Print Copies” ipv “In LIBISnet Catalogue” om snel bibliotheekmaterialen terug te vinden Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
37
Eerste observaties i.v.m. • • • • •
Eén toegang voor “alle” collecties Relevance ranking Facets FRBR groepering Tags & Reviews
Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
38
19
9-9-2013
Versies werden dikwijls niet opgemerkt
Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
39
Feedback van bibliotheken: de lijst van versies te rangschikken op datum.
Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
40
20
9-9-2013
Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
41
Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
42
21
9-9-2013
Tags en reviews • Gebruiksgegevens: praktisch niet gebruikt • Gebruikerstesten: 2 testers noemden tags als de minst nuttige functies -> Wordt verder bekeken maar voorlopig gedeactiveerd.
Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
43
Gebruikerstesten : beoordeling
Limo, exponent van een nieuwe generatie discovery tools
15-9-2011
44
22
