Using Interactive Features to Motivate and Probe Responses to Open-Ended Questions

Using Interactive Features to Motivate and Probe Responses to Open-Ended Questions Vragenlijst afgenomen in het LISS panel

datum auteur

25 mei 2009 Marije Oudejans T: +31 13 466 8323 E: [email protected] Postbus 90153, 5000 LE Tilburg Warandelaan 2, Gebouw K, 6e verdieping, kamer 642

© CentERdata, Tilburg, 2009 Alle rechten voorbehouden. Niets uit deze uitgave mag worden verveelvoudigd, opgeslagen in een geautomatiseerd gegevensbestand, of openbaar gemaakt, in enige vorm of op enige wijze, hetzij elektronisch, mechanisch, door fotokopieën, opnamen of op enige andere manier, zonder voorafgaande schriftelijke toestemming van de uitgever.

Inhoudsopgave

1

Projectbeschrijving ..........................................................................2

2

Inleiding.........................................................................................3

3

Codeboek .......................................................................................4

4

Descriptives ..................................................................................13

Using Interactive Features to Motivate and Probe Responses to Open-Ended Questions

1/18

1

Projectbeschrijving

Title: Using Interactive Features to Motivate and Probe Responses to Open-Ended Questions Data file: at08a Funding sources: CentERdata / MESS project Investigator: Leah Christian, Marije Oudejans Project description: The project explores how interactive features in web surveys can influence respondent behavior. Sample: Selected number of household members: 4268 (Random selection of panel members with age greater or equal to 16) Non-response: 1315 (31%) Actual response: 2953 (69%) Complete: 2928 Incomplete: 25 Date of data collection: August 2008 Titel: Het gebruik van interactiviteit om respondenten te motiveren en te laten antwoorden op open vragen Databestand: at08a Financiering: CentERdata / MESS project Onderzoeker: Leah Christian, Marije Oudejans Projectbeschrijving: Bij dit project wordt onderzocht hoe interactieve kenmerken van internet vragenlijsten het gedrag van respondenten kan beïnvloeden. Responsoverzicht: Selectie aantal leden huishouden: 4268 (Willekeurige selectie van panelleden met leeftijd 16 jaar en ouder) Nonrespons: 1315 (31%) Respons: 2953 (69%) Compleet: 2928 Incompleet: 25 Datum van dataverzameling: augustus 2008


2/18

2

Inleiding

In augustus 2008 is in het LISS panel een vragenlijst afgenomen over het effect van motivatie en vervolgvragen op de lengte en kwaliteit van antwoorden op open vragen. Hierbij werden de respondenten vier open vragen gesteld in een vragenlijst waarin ook meerdere gesloten vragen werden voorgelegd over de huidige situatie in Nederland. De respondent werd op willekeurige wijze toegewezen aan één van vier condities. In de controleconditie werd uitsluitend de open vraag voorgelegd, zonder extra motivatie of vervolgvraag. In de tweede conditie werd de open vraag voorafgegaan door de opmerking: ‘Deze vraag is erg belangrijk voor ons onderzoek.’, maar net als bij de controleconditie werd de vraag niet gevolgd door een vervolgvraag. In de derde conditie werd de open vraag gevolgd door een vervolgscherm waarop het gegeven antwoord werd herhaald en gevraagd werd of de respondent nog meer kon noemen. Ook in de vierde conditie kregen respondenten een vervolgvraag, maar hierbij werd ook de zin: ‘Deze vraag is erg belangrijk voor ons onderzoek’ getoond. Wanneer respondenten op de eerste open vraag geen antwoord gaven (of een zeer kort antwoord van minder dan vier karakters of een antwoord als ‘ik weet het niet’) werden zij in alle gevallen naar de conditie voor non-respondenten geleid waarbij de vraag werd herhaald en daarbij werd vermeld: ‘Geeft u alstublieft een antwoord. Deze vraag is erg belangrijk voor ons onderzoek.’. De vragenlijst is voorgelegd aan 4268 panelleden en 2953 vulden de vragenlijst in (responspercentage 69%).


3/18

3

Codeboek

Dit codeboek bevat de vragenlijst zoals deze in het LISS panel is afgenomen. • • • • •

De variabelennamen worden vet weergegeven en corresponderen met de namen in de dataset. De routing van de vragenlijst wordt bij de desbetreffende variabele cursief weergegeven. open: antwoordvak; geen limiet aan lengte van het antwoord string: antwoordvak waarbij een maximum aantal karakters kan worden ingevoerd (standaard 255) De range waarbinnen de respondent een antwoord kon geven bij numerieke variabelen is cursief afgebeeld in het codeboek wanneer deze niet zichtbaar was voor de respondent. Wanneer geen grenzen waren gesteld aan de range waarbinnen een antwoord kon vallen, staat dit in het codeboek weergegeven als ‘integer’.

nomem_encr Nummer van lid huishouden versleuteld nohouse_encr Nummer van huishouden versleuteld at08a_m Jaar en maand van de veldwerkperiode at08a001 experimentele conditie 1 controleconditie, geen vervolgvraag / geen motivatie 2 motivatie bij open vraag 3 vervolgvraag 4 vervolgvraag inclusief motivatie at08a002 - at08a015 Volgorde van stellingen burger in de Nederlandse samenleving De stellingen at08a036 tot en met at08a049 werden in willekeurige volgorde op het scherm getoond. De variabelen at08a002 tot en met at08a015 laten zien in welke volgorde deze stellingen werden getoond. Staat er bij at08a002 bijvoorbeeld een 3, dan betekent dit dat de derde stelling (Een burger in de Nederlandse samenleving dient vrijwilligerswerk te doen) als eerste op het scherm werd getoond. In de dataset staan de variabelen at08a036 tot en met at08a049 bij alle respondenten in dezelfde volgorde.


4/18

at08a016 - at08a019 Volgorde van stellingen basisprincipes van de samenleving De stellingen at08a050 tot en met at08a053 werden in willekeurige volgorde op het scherm getoond. De variabelen at08a016 tot en met at08a019 laten zien in welke volgorde deze stellingen werden getoond. In de dataset staan de variabelen at08a050 tot en met at08a053 bij alle respondenten in dezelfde volgorde. {intro} In deze vragenlijst vragen we naar uw mening over de huidige Nederlandse samenleving. at08a020 Hoe tevreden bent u over het algemeen met hoe het er in Nederland vandaag de dag aan toe gaat? 1 zeer tevreden 2 enigszins tevreden 3 enigszins ontevreden 4 zeer ontevreden if at08a001=1 or at08a001=3 or at08a001=4 at08a021 Waarom bent u [if at08a020=1 or at08a020=2: tevreden] [if at08a020=3 or at08a020=4: ontevreden] met hoe het er in Nederland vandaag de dag aan toe gaat? open, empty if at08a001=2 at08a022 Deze vraag is erg belangrijk voor ons onderzoek. Waarom bent u [if at08a020=1 or at08a020=2: tevreden] [if at08a020=3 of at08a020=4: ontevreden] met hoe het er in Nederland vandaag de dag aan toe gaat? open, empty if at08a001=3 and at08a021≠empty1 at08a023 U schreef: [at08a021] Is er nog iets wat u hieraan wilt toevoegen? open, empty

1

Ook wanneer het antwoord op een open vraag uit minder dan vier letters bestond of het antwoord uit minder dan 15 letters bestond en in ieder geval één van de volgende uitdrukkingen bevatte werd dit als ‘empty’ gezien: ‘weet ik niet’, ‘geen idee’, ‘weet niet’, ‘ik weet het niet’, ‘weet het niet’, ‘zeg ik niet’, ‘nvt’, n.v.t.’, ‘niks’, ‘niets’.


5/18

if at08a001=4 and at08a021≠empty at08a024 U schreef: [at08a021] Deze vraag is erg belangrijk voor ons onderzoek. Is er nog iets wat u hieraan wilt toevoegen? open, empty if ((at08a001=1 or at08a001=3 or at08a001=4) and at08a021=empty) or (at08a001=2 and at08a022=empty) at08a025 Geeft u alstublieft een antwoord. Deze vraag is erg belangrijk voor ons onderzoek. Waarom bent u [if at08a020=1 or at08a020=2: tevreden] [if at08a020=3 or at08a020=4: ontevreden] met hoe het er in Nederland vandaag de dag aan toe gaat? open, empty at08a026 Zou u zeggen dat het met de Nederlandse samenleving de goede of juist de verkeerde kant op gaat? 1 de goede kant 2 de verkeerde kant if at08a001=1 or at08a001=3 or at08a001=4 at08a027 Wat zijn volgens u de belangrijkste problemen die tegenwoordig in de Nederlandse samenleving spelen? open, empty if at08a001=2 at08a028 Deze vraag is erg belangrijk voor ons onderzoek. Wat zijn volgens u de belangrijkste problemen die tegenwoordig in de Nederlandse samenleving spelen? open, empty if at08a001=3 and at08a027≠empty at08a029 U schreef: [at08a027] Zijn er nog meer problemen die u kunt noemen? open, empty


6/18

if at08a001=4 and at08a027≠empty at08a030 U schreef: [at08a027] Deze vraag is erg belangrijk voor ons onderzoek. Zijn er nog meer problemen die u kunt noemen? open, empty if ((at08a001=1 or at08a001=3 or at08a001=4) and at08a027=empty) or (at08a001=2 and at08a028=empty) at08a031 Geeft u alstublieft een antwoord. Deze vraag is erg belangrijk voor ons onderzoek. Wat zijn volgens u de belangrijkste problemen die tegenwoordig in de Nederlandse samenleving spelen? open, empty at08a032 Vindt at08a033 Vindt leving? at08a034 Vindt samenleving? at08a035 Vindt 1 ja 2 nee

u dat u voldoende doet voor de samenleving? u dat de mensen in uw directe omgeving voldoende doen voor de u dat Nederlanders in het algemeen voldoende doen voor de u dat de samenleving voldoende doet voor u?

Stellingen at08a036 t/m at08a049 werden in willekeurige volgorde op het scherm getoond. at08a036 - at08a042 In hoeverre bent u het eens met de volgende stellingen? Een burger in de Nederlandse samenleving dient... at08a036 ...de buren te helpen at08a037 ...de Nederlandse taal te spreken at08a038 ...vrijwilligerswerk te doen at08a039 ...op de hoogte te zijn van de Nederlandse cultuur at08a040 ...zich op de hoogte te houden van wat er in de samenleving gebeurt at08a041 ...te zorgen voor eigen inkomsten als hij of zij kan werken at08a042 ...goed op zijn/haar uitgaven en eventuele schulden te letten 1 helemaal mee oneens 2 mee oneens 3 neutraal 4 mee eens 5 helemaal mee eens


7/18

Stellingen at08a036 t/m at08a049 werden in willekeurige volgorde op het scherm getoond. at08a043 – at08a049 Een burger in de Nederlandse samenleving dient... at08a043 ...te zorgen voor een goede opvoeding van eigen kinderen at08a044 ...te zorgen voor eigen ouders at08a045 ...zich in te zetten voor het netjes en veilig houden van de buurt at08a046 ...mensen die ongewenst gedrag vertonen daarop aan te spreken at08a047 ...milieubewust te leven at08a048 ...geld te geven aan goede doelen at08a049 ...lid te zijn van een politieke partij 1 helemaal mee oneens 2 mee oneens 3 neutraal 4 mee eens 5 helemaal mee eens De stellingen at08a050 tot en met at08a053 werden in willekeurige volgorde op het scherm getoond. at08a050 - at08a053 Hieronder staan afwegingen ten aanzien van verschillende basisprincipes van onze samenleving. Kies per regel wat u wilt voor de samenleving. at08a050 1 Meer gelijke behandeling 2 Neutraal 3 Meer onderscheid op basis van verschillen tussen mensen at08a051 1 Meer bescherming van privacy 2 Neutraal 3 Meer inbreuk op de privacy om veiligheid te kunnen waarborgen at08a052 1 Meer regels om risico’s uit te sluiten 2 Neutraal 3 Minder regels en meer risico’s accepteren at08a053 1 Meer vrijheid van meningsuiting 2 Neutraal 3 Meer voorkomen van kwetsen van anderen


8/18

at08a054 Hoe beoordeelt u Nederland als plek om te wonen? 1 uitstekend 2 goed 3 redelijk 4 slecht if (at08a054=1 or at08a054=2) and (at08a001=1 or at08a001=3 or at08a001=4) at08a055 Wat vindt u prettig aan het wonen in Nederland? open, empty if (at08a054=1 or at08a054=2) and at08a001=2 at08a056 Deze vraag is erg belangrijk voor ons onderzoek. Wat vindt u prettig aan het wonen in Nederland? open, empty if at08a001=3 and at08a055≠empty at08a057 U schreef: [at08a055] Zijn er nog meer redenen waarom u het prettig vindt om in Nederland te wonen? open, empty if at08a001=4 and at08a055≠empty at08a058 U schreef: [at08a055] Deze vraag is erg belangrijk voor ons onderzoek. Zijn er nog meer redenen waarom u het prettig vindt om in Nederland te wonen? open, empty if ((at08a001=1 or at08a001=3 or at08a001=4) and at08a055=empty) or (at08a001=2 and at08a056=empty) at08a059 Geeft u alstublieft een antwoord. Deze vraag is erg belangrijk voor ons onderzoek. Wat vind u prettig aan het wonen in Nederland? open, empty


9/18

at08a060 Hoeveel jaar woont u al in Nederland? 0..99 jaar at08a061 Eind 2007 presenteerde de WRR (Wetenschappelijke Raad voor het Regeringsbeleid) het rapport 'Identificatie met Nederland' dat ging over de Nederlandse identiteit. In welke mate hebt u over dit rapport gehoord of gelezen? 1 veel 2 een beetje 3 helemaal niet at08a062 In welke mate denkt u dat een Nederlandse identiteit bestaat? 1 in hoge mate 2 in enige mate 3 in beperkte mate 4 helemaal niet if (at08a062=1 or at08a062=2 or at08a062=3) and (at08a001=1 or at08a001=3 or at08a001=4) at08a063 Wat zijn volgens u de essentiële aspecten van de Nederlandse identiteit? Oftewel wat kan volgens u als typisch Nederlands worden beschouwd? open, empty if (at08a062=1 or at08a062=2 or at08a062=3) and at08a001=2 at08a064 Deze vraag is erg belangrijk voor ons onderzoek. Wat zijn volgens u essentiële aspecten van de Nederlandse identiteit? Oftewel wat kan volgens u als typisch Nederlands worden beschouwd? open, empty if at08a001=3 and at08a063≠empty at08a065 U schreef: [at08a063] Zijn er nog andere dingen die volgens u typisch Nederlands zijn? open, empty


10/18

if at08a001=4 and at08a063≠empty at08a066 U schreef: [at08a063] Deze vraag is erg belangrijk voor ons onderzoek. Zijn er nog andere dingen die volgens u typisch Nederlands zijn? open, empty if (at08a001=1 or at08a001=3 or at08a001=4) and at08a063=empty or (at08a001=2 and at08a064=empty) at08a067 Geeft u alstublieft een antwoord. Deze vraag is erg belangrijk voor ons onderzoek. Wat kan volgens u als typisch Nederlands worden beschouwd? open, empty at08a068 Hoeveel jaar maakt u al gebruik van internet? Wanneer u naast het invullen van de vragenlijsten voor het LISS panel geen gebruik maakt van internet, klikt u dan op de knop 'geen gebruik'. 0..99 jaar 99 weet ik niet at08a069 - at08a073 NB: Maakt u alstublieft de vragenlijst af totdat u weer bij het beginscherm komt. Pas dan registreert het systeem de vragenlijst als volledig ingevuld. Tot slot. Wat vond u van deze vragenlijst: 1 = beslist niet 5 = beslist wel at08a069 Vond u het moeilijk om de vragen te beantwoorden? at08a070 Vond u de vragen duidelijk? at08a071 Heeft de vragenlijst u aan het denken gezet? at08a072 Vond u het onderwerp interessant? at08a073 Vond u het plezierig om de vragen in te vullen? 1 beslist niet 2 3 4 5 beslist wel at08a074 Datum begin vragenlijst at08a075 Tijd begin vragenlijst


11/18

at08a076 Datum einde vragenlijst at08a077 Tijd einde vragenlijst at08a078 duur in seconden


12/18

4

Descriptives N

at08a001 experimentele

Minimum

Maximum

Mean

Std. Deviation

2953

1

4

2,50

1,119

2953

1

14

7,49

4,014

2953

1

14

7,48

4,031

2953

1

14

7,47

4,062

2953

1

14

7,48

4,021

2953

1

14

7,41

4,082

2953

1

14

7,60

4,016

2953

1

14

7,48

4,078

2953

1

14

7,53

4,010

conditie at08a002 volgorde van stellingen burger in de Nederlandse samenleving: als eerste getoond at08a003 volgorde van stellingen burger in de Nederlandse samenleving: als tweede getoond at08a004 volgorde van stellingen burger in de Nederlandse samenleving: als derde getoond at08a005 volgorde van stellingen burger in de Nederlandse samenleving: als vierde getoond at08a006 volgorde van stellingen burger in de Nederlandse samenleving: als vijfde getoond at08a007 volgorde van stellingen burger in de Nederlandse samenleving: als zesde getoond at08a008 volgorde van stellingen burger in de Nederlandse samenleving: als zevende getoond at08a009 volgorde van stellingen burger in de Nederlandse samenleving: als achtste getoond


13/18

at08a010 volgorde van

2953

1

14

7,53

4,025

2953

1

14

7,37

3,987

2953

1

14

7,56

4,026

2953

1

14

7,57

4,018

2953

1

14

7,38

3,987

2953

1

14

7,64

4,075

2953

1

4

2,48

1,102

2953

1

4

2,57

1,118

2953

1

4

2,45

1,122

2953

1

4

2,50

1,127

stellingen burger in de Nederlandse samenleving: als negende getoond at08a011 volgorde van stellingen burger in de Nederlandse samenleving: als tiende getoond at08a012 volgorde van stellingen burger in de Nederlandse samenleving: als elfde getoond at08a013 volgorde van stellingen burger in de Nederlandse samenleving: als twaalfde getoond at08a014 volgorde van stellingen burger in de Nederlandse samenleving: als dertiende getoond at08a015 volgorde van stellingen burger in de Nederlandse samenleving: als veertiende getoond at08a016 volgorde van stellingen basisprincipes van de samenleving: als eerste getoond at08a017 volgorde van stellingen basisprincipes van de samenleving: als tweede getoond at08a018 volgorde van stellingen basisprincipes van de samenleving: als derde getoond at08a019 volgorde van stellingen basisprincipes van de samenleving: als vierde getoond


14/18

at08a020 Hoe tevreden bent

2953

1

4

2,42

,652

2942

1

2

1,63

,483

2932

1

2

1,21

,409

2932

1

2

1,29

,452

2932

1

2

1,57

,495

2932

1

2

1,35

,476

2929

1

5

3,96

,759

2929

1

5

4,44

,707

2929

1

5

3,12

,898

2929

1

5

4,10

,735

u over het algemeen met hoe het er in Nederland vandaag de dag aan toe gaat? at08a026 Zou u zeggen dat het met de Nederlandse samenleving de goede of juist de verkeerde kant op gaat? at08a032 Vindt u dat u voldoende doet voor de samenleving? at08a033 Vindt u dat de mensen in uw directe omgeving voldoende doen voor de samenleving? at08a034 Vindt u dat Nederlanders in het algemeen voldoende doen voor de samenleving? at08a035 Vindt u dat de samenleving voldoende doet voor u? at08a036 Een burger in de Nederlandse samenleving dient de buren te helpen at08a037 Een burger in de Nederlandse samenleving dient de Nederlandse taal te spreken at08a038 Een burger in de Nederlandse samenleving dient vrijwilligerswerk te doen at08a039 Een burger in de Nederlandse samenleving dient op de hoogte te zijn van de Nederlandse cultuur


15/18

at08a040 Een burger in de

2929

1

5

4,03

,694

2929

1

5

4,45

,675

2929

1

5

4,29

,721

2929

1

5

4,65

,586

2929

1

5

3,50

,913

2929

1

5

4,27

,677

2929

1

5

3,95

,809

2929

1

5

4,13

,697

2929

1

5

3,10

,932

Nederlandse samenleving dient zich op de hoogte te houden van wat er in de samenleving gebeurt at08a041 Een burger in de Nederlandse samenleving dient te zorgen voor eigen inkomsten als hij of zij kan werken at08a042 Een burger in de Nederlandse samenleving dient goed op zijn/haar uitgaven en eventuele schulden te letten at08a043 Een burger in de Nederlandse samenleving dient te zorgen voor een goede opvoeding van eigen kinderen at08a044 Een burger in de Nederlandse samenleving dient te zorgen voor eigen ouders at08a045 Een burger in de Nederlandse samenleving dient zich in te zetten voor het netjes en veilig houden van de buurt at08a046 Een burger in de Nederlandse samenleving dient mensen die ongewenst gedrag vertonen daarop aan te spreken at08a047 Een burger in de Nederlandse samenleving dient milieubewust te leven at08a048 Een burger in de Nederlandse samenleving dient geld te geven aan goede doelen


16/18

at08a049 Een burger in de

2929

1

5

2,39

,899

2929

1

3

1,52

,698

2929

1

3

1,77

,784

2929

1

3

2,00

,733

2929

1

3

2,07

,824

2929

1

4

2,06

,609

2929

1

95

45,08

16,770

2929

1

3

2,65

,514

2929

1

4

2,15

,748

2793

0

96

8,40

4,641

2928

1

5

2,57

1,291

2928

1

5

3,86

1,039

2928

1

5

3,16

1,101

2928

1

5

3,61

1,000

Nederlandse samenleving dient lid te zijn van een politieke partij at08a050 Wat wilt u voor de samenleving? at08a051 Wat wilt u voor de samenleving? at08a052 Wat wilt u voor de samenleving? at08a053 Wat wilt u voor de samenleving? at08a054 Hoe beoordeelt u Nederland als plek om te wonen? at08a060 Hoeveel jaar woont u al in Nederland? at08a061 Eind 2007 presenteerde de WRR het rapport -Identificatie met Nederland- dat ging over de Nederlandse identiteit. In welke mate heeft u over dit rapport gehoord of gelezen? at08a062 In welke mate denkt u dat een Nederlandse identiteit bestaat? at08a068 Hoeveel jaar maakt u al gebruik van internet? at08a069 Vond u het moeilijk om de vragen te beantwoorden? at08a070 Vond u de vragen duidelijk? at08a071 Heeft de vragenlijst u aan het denken gezet? at08a072 Vond u het onderwerp interessant?


17/18

at08a073 Vond u het

2928

1

5

3,57

,964

plezierig om de vragen in te vullen? Valid N (listwise)

2793


18/18

Using Interactive Features to Motivate and Probe Responses to Open-Ended Questions

Recommend Documents