Handleiding vragenlijsten maken met SelectSurvey V4.0
Handleiding vragenlijsten maken met SelectSurvey Inhoudsopgave INLEIDING .............................................................................................................................................. 2 H1 VRAGENLIJST MAKEN.................................................................................................................... 3 1.1 1.2 1.3 1.4 1.5 1.6 1.7 1.8 1.9 1.10 1.11 1.12 1.13 1.14
Inloggen ................................................................................................................................ 3 Project begin ......................................................................................................................... 3 Templates ............................................................................................................................. 4 Vragen maken ...................................................................................................................... 6 Vraag met één antwoord mogelijk ........................................................................................ 7 Nieuwe vraag toevoegen ...................................................................................................... 9 Vraag met een open numeriek antwoord ........................................................................... 10 Schaalvraag in matrix vorm ................................................................................................ 12 Antwoorden terug laten komen in andere vragen: Piping .................................................. 14 Kopieerbeveiliging .............................................................................................................. 15 Routing................................................................................................................................ 16 Afbeeldingen ....................................................................................................................... 17 Subteksten .......................................................................................................................... 18 Popups................................................................................................................................ 19
H2 OPTIES VOOR DE VRAGENLIJST INSTELLEN........................................................................... 21 2.1 2.2
Opties vragenlijst ................................................................................................................ 21 Back-up vragenlijst ............................................................................................................. 25
H3 ONDERZOEK STARTEN ................................................................................................................ 26 3.1 3.2 3.3
Vragenlijst online zetten...................................................................................................... 26 Potentiële respondenten benaderen .................................................................................. 26 Back-ups en tussentijdse analyse ...................................................................................... 29
H4 ANALYSEREN VAN DATA ............................................................................................................ 30 4.1 4.2 4.3
Analyse in SelectSurvey ..................................................................................................... 30 Analyse in andere software pakketten (Excel, SPSS)........................................................ 31 Geavanceerde analyses in SPSS ...................................................................................... 33
BIJLAGE I: OVERZICHT VAN DE MENU OPTIES ............................................................................. 34 BIJLAGE II: INSTELLEN ACTIVEX CONTROLS................................................................................ 35 BIJLAGE III: EXPORT NAAR SPSS MOGELIJKHEID 2 .................................................................... 37
1
Handleiding vragenlijsten maken met SelectSurvey V4.0
Inleiding SelectSurvey is één van de vele tools waarmee vragenlijsten gemaakt kunnen worden die vervolgens via internet worden afgenomen. Deze tool onderscheidt zich van andere tools op een aantal zaken: − Eenvoudig in gebruik − Zeer veel opties om vragenlijsten vorm te geven − Geen beperkingen ten aanzien van aantal gebruikers of maximum aantal reacties − Uitstekende mogelijkheden om een onbeperkt aantal gebruikers van deze tool gebruik te laten maken Deze handleiding zal niet alle mogelijkheden van SelectSurvey bespreken, daar is het pakket te uitgebreid voor. Het doel van de handleiding is om de gebruiker een snel inzicht te bieden in de mogelijkheden. Het doel van deze handleiding is niet om de gebruiker te leren hoe een goede vragenlijst in elkaar zit, daar zijn andere boeken en handleidingen veel beter geschikt voor. Het programma (en deze handleiding) volgt de volgende stappen: 1. Design: ontwerp van de vragenlijst (= hoofdstuk 1) 2. Options: instellingen voor het onderzoek (= hoofdstuk 2) 3. Deploy: links voor het online zetten van de vragenlijst (= hoofdstuk 3) 4. Analyze: analyseren van de resultaten (= hoofdstuk 4) LET OP: SelectSurvey werkt alleen goed indien de “ActiveX controls” in de internet explorer aan staan, zie bijlage II hoe dit gecontroleerd / aangepast kan worden.
2
Handleiding vragenlijsten maken met SelectSurvey V4.0
H1 Vragenlijst maken 1.1 Inloggen De applicatie is te vinden op http://www.eurib-research.org/survey/Login.aspx.
TIP: begin niet gelijk met het maken van de uiteindelijke vragenlijst. Werk eerst het korte voorbeeld van deze handleiding uit en start daarna opnieuw met de uiteindelijke vragenlijst. Op die wijze worden de mogelijkheden van het programma goed duidelijk in relatief korte tijd.
Figuur 1.1 Inloggen
1.2 Project begin Ieder project begint met het aanmaken van de vragenlijst en deze van een naam te voorzien (zie figuur 1.2 en 1.3). Figuur 1.2 Aanmaken van een vragenlijst
3
Handleiding vragenlijsten maken met SelectSurvey V4.0 Figuur 1.3 Naam geven aan de vragenlijst
1.3 Templates Een ‘template’ is zoiets als de opmaak van je enquête. De optie om deze opmaak te wijzigen vindt je bovenaan in het menu, zie figuur 1.4. Figuur 1.4 Locatie ‘Templates’
Wanneer er op deze optie geklikt wordt verschijnt er een scherm waarin je een eigen ‘template’ kan aanmaken (Kies de optie ‘Create new template’). Met deze opmaak kan niet alleen elke kleur en tekst van je enquête aangepast worden, maar ook de taal van de enquête en de tekst van de navigatieknoppen. Om de ‘template’ te activeren voor jouw enquête moet je, na of tijdens het maken van de vragen, naar het ‘Options’ menu van jouw enquête en daar de desbetreffende ‘template’ selecteren.
4
Handleiding vragenlijsten maken met SelectSurvey V4.0 Figuur 1.5 Aanpassing tekst van de navigatieknoppen
Ook kunnen er buttons gekozen worden, deze zijn te vinden bij het ‘Edit’ menu van jouw template. In het programma staan een aantal buttons standaard, wanneer je een nieuwe template maakt staan deze daar in. In figuur 1.5 is aangegeven hoe je een tekst kunt aanpassen. Ook kun je kiezen voor pijlen met daarin de tekst. Dat kan in het Engels, zoals in figuur 1.5 aangegeven of in het Nederlands. De volledige paden voor de Engelstalige pijlen: http://www.eurib-research.org/images/arrowback.jpg http://www.eurib-research.org/images/arrownext.jpg http://www.eurib-research.org/images/arrowdone.jpg http://www.eurib-research.org/images/arrowcancel.jpg (NIET aan te raden) http://www.eurib-research.org/images/leeg.jpg Het programma heeft een belangrijk nadeel: dat is de “Cancel” button. Die sluit namelijk de gehele vragenlijst met 1 klik af, ook terwijl dat wellicht niet de bedoeling is. Deze knop kun je uit zetten bij ‘navigation properties’ (onder ‘Options’ menu van jouw enquête), of je plaatst er een leeg plaatje (leeg.jpg, 1 pixel groot). De volledige paden voor de Nederlandstalige pijlen: http://www.eurib-research.org/images/pijlterug.jpg http://www.eurib-research.org/images/pijlvolgende.jpg http://www.eurib-research.org/images/pijlklaar.jpg http://www.eurib-research.org/images/pijlannuleren.jpg (NIET aan te raden) http://www.eurib-research.org/images/leeg.jpg
5
Handleiding vragenlijsten maken met SelectSurvey V4.0
1.4 Vragen maken SelectSurvey biedt meer dan 20 verschillende mogelijkheden om vragen te stellen. Een drietal methoden worden hieronder besproken. Dat zijn achtereenvolgens: − Een vraag waarbij één antwoord mogelijk is − Een vraag waarbij meerdere antwoorden mogelijk zijn − Een batterij vragen met één antwoord mogelijk per vraag (een matrix) Andere methoden die veel gebruikt worden, maar hier niet besproken worden zijn: − Een vraag met meerdere antwoorden mogelijk • Choice – Multiple answers (Checkboxes) − Een batterij vragen met een numerieke schaal (bijv. van 1 tot 5): • Matrix – Rating Scale (Numeric) − Een vraag waarbij één antwoord uit een lijst gekozen kan worden: • Choice – Database Dropdown − Een open vraag • Open Ended – Comments Box − Een afbeelding • Presentation - Image Deze opties worden vanzelf duidelijk wanneer de opties die wél in deze handleiding staan goed doorgenomen zijn.
Figuur 1.6 Vraag toevoegen aan de vragenlijst
6
Handleiding vragenlijsten maken met SelectSurvey V4.0
1.5 Vraag met één antwoord mogelijk In figuur 1.7 is te zien hoe een vraag met één antwoordmogelijkheid aangemaakt wordt. Dit wordt op de volgende pagina kort met tekst toegelicht. Figuur 1.7 Maken van een vraag met één antwoord mogelijkheid
7
Handleiding vragenlijsten maken met SelectSurvey V4.0 Vraag met één antwoord mogelijk − Choose an Item Type • kies voor Choice – One Answer (Option Buttons) − Question o Enter the question • Vul de letterlijke vraagtekst in, bijvoorbeeld “Wat is uw geslacht?” o Aanvullende mogelijkheden: Question alias • een alias (korte naam), is handig bij rapporteren, vul bijvoorbeeld “geslacht” in Sub-text: • hier kan een korte toelichting op de vraag gegeven worden die onder de vraagtekst komt te staan − Options o Required Vink dit aan als de vraag verplicht is (mag de respondent niet overslaan) • In dit geval is de vraag verplicht en vinken we dit aan o Random order Vink dit aan als de vraag in een willekeurige volgorde getoond moet worden (rouleren van vragen) • Dat willen we in dit geval niet en we vinken dit niet aan o Answer alignment Hier kunnen we kiezen of de antwoordmogelijkheden horizontaal of verticaal weergegeven moeten worden. In dit geval kiezen we voor verticaal. − Answers o Select answer choices Hier kan gekozen worden voor standaard antwoordcategorieën • De antwoordcategorieën staan er niet tussen, we slaan deze optie over o Enter the answers In de velden kunnen de antwoordmogelijkheden gegeven worden o Default Als we willen dat het vinkje voor de respondent al in een bepaald vakje (antwoordmogelijkheid) komt te staan dan kan dat met default aangegeven worden • In dit geval willen we dat niet o Points Als we een specifiek cijfer willen toekennen aan een antwoordmogelijkheid kan dat hier aangegeven worden • Deze optie is handig voor variabelen waar we in een later stadium bijvoorbeeld een gemiddelde score willen berekenen. In dit geval voeren we de (nominale) variabele geslacht in en is dit niet relevant. o Allow additional answers Hier kan gekozen worden om de mogelijkheid “Anders, namelijk … ” aan de vraag toe te voegen • In dit geval willen we dat niet −
Save o
Op het moment dat alles goed staat drukken we op save
8
Handleiding vragenlijsten maken met SelectSurvey V4.0
1.6 Nieuwe vraag toevoegen Vervolgens komen we op een nieuwe pagina waar nieuwe vragen toegevoegd kunnen worden (zie figuur 1.8). − Insert o Hiermee voegen we een vraag toe op dezelfde webpagina − We kiezen deze optie om op die manier een vraag met betrekking tot leeftijd toe te voegen − New pg o Hiermee voegen we een vraag toe op een nieuwe webpagina − Deze optie kiezen we in dit geval niet Figuur 1.8 Invoegen van een nieuwe vraag
Met de opties onder genoemd onder ‘Presentation’ kunnen zaken toegevoegd worden die met opmaak te maken hebben: − Presentation – Heading • Koptekst toevoegen − Presentation – Horizontal Rule • Lijn toevoegen − Presentation – HTML • HTML content toevoegen − Presentation – Image • Afbeelding toevoegen − Presentation – Message • Tekst toevoegen
9
Handleiding vragenlijsten maken met SelectSurvey V4.0
1.7 Vraag met een open numeriek antwoord We komen weer in de pagina “Create new item” (zie figuur 1.9 en 1.10), we willen de leeftijd in jaren weten. − We kiezen de optie Open Ended – Number − De eerste stappen zijn weer gelijk als bij de vraag naar het geslacht − Options o Minimum value: stel dat de minimum leeftijd van onze respondenten 16 jaar is, dan kunnen we dat hier invullen o Maximum value: hier vullen we de maximale waarde in. We gaan ervan uit dat onze respondenten niet ouder zijn dan 99 jaar o Maximum length: het aantal posities, de maximum waarde is 99, dat betekent maximaal 2 posities. Als iemand zich vergist en niet “33” maar “333” intikt dan volgt een foutmelding Vervolgens kiezen we voor het maken van een vraag in een nieuwe webpagina. Figuur 1.9 Maken van een open, numerieke vraag
10
Handleiding vragenlijsten maken met SelectSurvey V4.0 Figuur 1.10 Tweede vraag (open, numeriek) is toegevoegd
11
Handleiding vragenlijsten maken met SelectSurvey V4.0
1.8 Schaalvraag in matrix vorm Eén van de meest gebruikte vormen is een schaalvraag in matrixvorm, deze zijn namelijk door respondenten snel te beantwoorden en ze leveren veel informatie op. In figuur 1.11 staat een voorbeeld van hoe een dergelijke vraag aangemaakt kan worden, de tekstuele toelicht staat op de volgende pagina. Figuur 1.11 Maken van een vraag in matrix vorm
12
Handleiding vragenlijsten maken met SelectSurvey V4.0 Vraag met één antwoord mogelijk − Choose an Item Type • kies voor Matrix – One Answer per Row (Option Buttons) − Question o Enter the question • Vul de letterlijke vraagtekst in, bijvoorbeeld “Wat vindt u van restaurant De Pollepel?” Dit is een inleidende tekst, nog niet de exacte vraagtekst, die volgt hierna. o Aanvullende mogelijkheden: Question alias • een alias (korte naam), is handig bij rapporteren, vul bijvoorbeeld “algemeen” in Sub-text: • hier kan een korte toelichting op de vraag gegeven worden die onder de vraagtekst komt te staan − Options o Required Vink dit aan als de vraag verplicht is (mag de respondent niet overslaan) • In dit geval is de vraag verplicht en vinken we dit aan o Random order Vink dit aan als de vraag in een willekeurige volgorde getoond moet worden (rouleren van vragen) • In dit geval vinken we dit niet aan, vaak is dit echter juist gewenst bij batterijen van vragen − Rows • Hier zetten we de eigenlijke vragen: op iedere rij een vraag − Columns o Select column headings • Hier kan gekozen worden voor standaard antwoordcategorieën, daar kiezen we in dit geval niet voor o Enter the column headings • Hier zetten we de antwoordmogelijkheden o Insert new column • Deze optie kiezen we om een zesde antwoordcategorie toe te voegen, de antwoordcategorie “weet niet/nvt” −
Save o
Op het moment dat alles goed staat drukken we op save en we krijgen het resultaat te zien (figuur 1.12).
Figuur 1.12 Resultaat van de vraag in matrix vorm
13
Handleiding vragenlijsten maken met SelectSurvey V4.0
1.9 Antwoorden terug laten komen in andere vragen: Piping Het afbeelden van een antwoord op de ene vraag in een opvolgende vraag heet het verbinden van antwoorden, ook wel ‘answer piping’. Bijvoorbeeld, de respondent wordt in het begin van de enquête om zijn/haar voornaam gevraagd. Op een volgende pagina wil je graag de vraag beginnen met de voornaam van de respondent. Figuur 1.13 ‘Answer Piping’
Zoals hier te zien is, wordt in het begin van de enquête om de voornaam van de respondent gevraagd. Om het antwoord op deze vraag te linken naar een volgende vraag is er een handige tool in Select Survey opgenomen. Bij elke vraag is de knop ‘pipe’ te vinden. Wanneer deze aangeklikt wordt komt er een popup in beeld waarin een code staat. Deze code moet gekopieerd worden alvorens het scherm te sluiten. Wanneer de code gekopieerd is kan de volgende stap genomen worden, het verbinden van het antwoord op de vraag 4 aan een opvolgende vraag. Stel nu dat ergens op de volgende pagina iemand persoonlijk aangesproken moet worden, uiteraard heeft elke respondent een andere naam dus is het handig om het antwoord op vraag 4 te verbinden met de huidige vraag. Om dit te doen wordt bij het invoeren van de vraag in plaats van een naam de eerder ontvangen code ingetypt (zie figuur 1.14). Figuur 1.14 Invoeren van de code in de vraag.
Wanneer deze stappen goed gevolgd zijn zal in de enquête de naam “Jan” automatisch verschijnen in de vraag. LET OP: De opvolgende vraag waar het antwoord naar gelinkt wordt, moet wel na een ‘pagebreak’ gesteld worden.
14
Handleiding vragenlijsten maken met SelectSurvey V4.0
1.10 Kopieerbeveiliging Wanneer gebruik gemaakt wordt van vragenlijsten waarbij het onwenselijk is dat deze gekopieerd wordt, kan een kopieerbeveiliging ingesteld worden. Dit is een html code die voorkomt dat teksten geblokt kunnen worden. Bovendien wordt de rechtermuisknop uitgeschakeld voor die betreffende pagina. De html code is: Dit is in figuur 1.15 weergegeven. Figuur 1.15 Beveiliging bij page properties
LET OP: Dit dient voor iedere pagina van de vragenlijst aangegeven te worden.
15
Handleiding vragenlijsten maken met SelectSurvey V4.0
1.11 Routing Bij routing laten we bepaalde vragen wel of niet zien, afhankelijk van antwoorden op eerder gestelde vragen. We doen dit per pagina, dus een bepaalde pagina wordt wel of niet getoond afhankelijk van antwoorden op een eerdere vraag. Dit kan aangegeven worden onder “insert page conditions” (zie figuur 1.16). LET OP: Het programmeren van routings is zeer foutgevoelig en als de vragenlijst eenmaal live staat kunnen fouten niet hersteld worden. Daarom verdient het aanbeveling om routings zoveel mogelijk te vermijden en vragenlijsten zo eenvoudig mogelijk te houden. Figuur 1.16 Aanpassen page conditions t.b.v. routing
Wanneer we bijvoorbeeld eerst de vraag stellen of mensen een bepaalde communicatie uiting gezien hebben om vervolgens daarover hun mening te vragen dan programmeren we de conditie bij: − Question: geef aan bij welke vraag de conditie staat − Operator: geef de voorwaarde aan − Answer: geef aan welk antwoord In figuur 1.17 is een voorbeeld opgenomen. Figuur 1.17 Aanpassen page conditions t.b.v. routing
16
Handleiding vragenlijsten maken met SelectSurvey V4.0
1.12 Afbeeldingen Als er afbeeldingen opgenomen moeten worden, dan moeten deze eerst geupload worden naar de server van EURIB. Mail daarvoor de grafische bestanden naar
[email protected]. Vervolgens kan zoals getoond in figuur 1.18 een afbeelding opgenomen worden in de vragenlijst. Bij het image path komt te staan: http://www.eurib-research.org/images/*naam bestand*, bijvoorbeeld: http://www.eurib-research.org/images/euribresearch.jpg. Figuur 1.18 Toevoegen afbeelding aan vragenlijst
17
Handleiding vragenlijsten maken met SelectSurvey V4.0
1.13 Subteksten Soms is het gemakkelijk wanneer bij vragen een subtekst vermeld wordt die een nadere verduidelijking geeft. Liefst willen we die subtekst op een aparte regel en iets kleiner weergeven. Dit kan door het toevoegen van de volgende html code:
regel toelichting Figuur 1.19 Subteksten toevoegen
Figuur 1.20 Resultaat subteksten
18
Handleiding vragenlijsten maken met SelectSurvey V4.0
1.14 Popups Deze optie is alleen geschikt voor gebruikers met gevorderde kennis van html. Wanneer begrippen in een vraag een nadere, uitgebreide uitleg vragen kan het aan te raden zijn om dit in een apart scherm weer te geven. Popups werken op basis van Javascript en worden vaak geblokkeerd door browsers. Beter is om dit door middel van een aparte html pagina te programmeren. In de vraagtekst komt dan een hyperlink naar deze html pagina en in de html pagina weer een backlink naar de vragenlijst. Figuur 1.21 Apart scherm aanmaken met html code Html code
Resultaat
Design is the added value process between the idea and the outcome in the creation of products, services, objects, communications, environments and experiences.
Back Vervolgens dient 1) de html pagina geupload te worden naar de server (in de map /httpdocs/pops; neem daarvoor contact op met de webmaster) en 2) een link geplaatst te worden in de vragenlijst. Het plaatsen van een link in de vragenlijst gaat als volgt. Wanneer het html bestand bijvoorbeeld “DMEpop1.htm” heet, dan plaatst de volgende html code een link in de vragenlijst:
Design is too expensive
19
Handleiding vragenlijsten maken met SelectSurvey V4.0 Bij het programmeren van de vragenlijst ziet dat er als volgt uit: Figuur 1.22 Html code in de vragenlijst
Resultaat:
Er is één nadeel aan deze methode: omdat er html code in een vragenlijst gezet wordt, kan dit bij een aantal soorten vragen niet meer ge-edit worden. In dat geval rest slechts één optie: de gehele vraag er opnieuw in zetten.
20
Handleiding vragenlijsten maken met SelectSurvey V4.0
H2 Opties voor de vragenlijst instellen 2.1 Opties vragenlijst In het menu options (zie figuur 2.1) kunnen de verschillende opties voor de vragenlijst ingesteld worden, waaronder bijvoorbeeld de tijd dat de vragenlijst online moet staan (=veldwerk periode). Figuur 2.1 Options menu1
Figuur 2.2 Opties voor de vragenlijst
1
Dit wordt alleen getoond indien de “ActiveX controls” in de internet explorer aan staan. Zie bijlage II van deze handleiding. 21
Handleiding vragenlijsten maken met SelectSurvey V4.0 In het options menu kunnen vele zaken aangegeven worden. Hieronder volgt een opsomming met in rood de zaken waar voornamelijk goed op gelet moet worden: −
Title
−
Template
−
Survey language
− − − −
−
o
Zet een titel bovenaan de vragenlijst.
o
Opmaakprofielen.
o
Instellen van de taal.
o
Design (ontwerp fase), open (de vragenlijst kan ingevuld worden) of closed (de vragenlijst kan niet meer ingevuld worden).
Status
Start date / end date o
Begin en eind van de veldwerkperiode, standaard staat die op 1 maand, dit kan aangepast worden.
Date created o Datum waarop de vragenlijst aangemaakt is. Respondent access level o Hier kan gekozen worden welke mensen de vragenlijst mogen invullen. o Mogen mensen de vragenlijst meerdere keren invullen? (single response versus multiple response) o Moet iemand een login code hebben of mag iedereen de vragenlijst invullen? (login required versus anonymous access allowed) o Mogen mensen antwoorden die zij gegeven hebben nog aanpassen (=updateable)? o Standaard staat dit op Multiple Response, Anonymous Access Allowed. Wanneer je voor een Single Response Anonymous Access kiest wordt het IP-adres van de respondent onthouden en kan deze vanaf 1 computer ook slechts 1x reageren. Dit is niet handig wanneer meerdere mensen via eenzelfde computer het onderzoek doen. Je kunt er dan voor kiezen om login codes te verschaffen of toch de standaardoptie aan te houden. Survey completion properties o Completion action o Wat moet er gebeuren als de respondent de vragenlijst ingevuld heeft o Laat een bedank boodschap zien o Laat de resultaten van het onderzoek zien o Ga naar een bepaald webadres o Sluit de browser o Completion message o Bedankbericht waarmee de vragenlijst afgesloten wordt. o Completion URL o Webadres waar respondent naartoe gaat bij afsluiten vragenlijst. o Buttons o Knoppen die onder bovenstaand bedankbericht weergegeven worden. o Send responses to: o Respons van individuele respondenten kan naar een email adres naar keuze gestuurd worden. Standaard staat dit uit. o Email respondent o Met deze optie kan respons van individuele respondenten naar hun eigen email adres gestuurd worden. Standaard staat dit uit.
22
Handleiding vragenlijsten maken met SelectSurvey V4.0 −
−
−
−
−
Navigation properties o Back button o De back button (“terug” knop) kan aan- of uit gezet worden. o Save button o De save button (“opslaan” knop) kan aan- of uit gezet worden. o Cancel button o Opties voor de cancel button (“herstel” knop): o Sluit de browser (= standaard) o Niet laten zien o Ga naar eind vragenlijst o Ga naar een op te geven webadres Het is bijzonder onhandig als de respondent (misschien per ongeluk) op “herstel” of “cancel” drukt en vervolgens wordt de browser afgesloten. Advies: laat de cancel button niet zien o Cancel button URL Hidden fields o Configured fields o Als een respondent een vragenlijst invult, is het aan te bevelen om de antwoorden die hij/zij al gegeven heeft te bewaren (voor het geval de internetverbinding bijvoorbeeld uitvalt). Met deze optie kan dit aan gezet worden. IP Address Validation o IP Adress Range o Met deze optie kunnen IP adressen (adressen van bepaalde computers) geselecteerd worden zodat alleen vanaf deze computers de vragenlijst ingevuld kan worden. User group validation o User group access o Hiermee kunnen bepaalde groepen mensen toegang tot de vragenlijst verleend worden. Numbering properties o Page numbering o De voortgang van de vragenlijst kan weergegeven worden: o Met een balkje o Met paginanummers o Niet o Question numbering o Vragen kunnen genummerd worden o Voor de gehele vragenlijst o Binnen iedere pagina
23
Handleiding vragenlijsten maken met SelectSurvey V4.0 −
−
Other administrative properties o Report format o Resultaten kunnen weergegeven worden in barcharts (staafdiagrammen) of pie charts (taart diagrammen) o Report security o Hier kan aangegeven worden welke resultaten respondenten kunnen zien: o High: alleen survey owners (de beheerder(s) van de vragenlijst) krijgen resultaten te zien, respondenten niet o Medium: respondenten kunnen alleen overall resultaten zien o Low: respondenten kunnen alle resultaten zien Advies: kies voor high of medium in verband met vertrouwelijkheid van gegeven antwoorden o Highlight responses o De respondent kan zijn eigen antwoorden vergelijken met de overige gegeven antwoorden o Maximum responses o Hier kan een maximum aantal responses opgegeven worden. Standaard is er geen maximum. o Responses per user o Indien een respondent meerdere keren aan het onderzoek mag deelnemen dan kan hier een maximum aantal deelnames opgegeven worden. o Days for update o Aantal dagen dat een respondent zijn gegeven antwoorden nog mag wijzigen (mits die optie aan staat) Administrator properties o Owners o De beheerder(s) van de vragenlijst o Admin Email o Email adres van de beheerder van de vragenlijst
24
Handleiding vragenlijsten maken met SelectSurvey V4.0
2.2 Back-up vragenlijst Wanneer alle opties ingesteld zijn, is het aan te raden om een back-up te maken van de vragenlijst. Wanneer bijvoorbeeld per abuis op “delete” gedrukt wordt (en dit bevestigd wordt), is een geprogrammeerde vragenlijst niet meer terug te halen. Een back-up wordt gemaakt door een kopie te maken van de vragenlijst onder de knop “new survey” (figuur 2.3). Vervolgens dient het kopie (de back-up) gesloten te worden bij ‘Options’ zodat niet op de verkeerde vragenlijst ingelogd wordt (figuur 2.4). Wanneer een back-up van de vragenlijst gemaakt is, wil dit NIET zeggen dat de data ook gebackupt wordt. Zie daarvoor H3.3. Figuur 2.3 Kopie maken van de vragenlijst t.b.v. back-up
Figuur 2.3 Kopie maken van de vragenlijst t.b.v. back-up
25
Handleiding vragenlijsten maken met SelectSurvey V4.0
H3 Onderzoek starten Bij start van het onderzoek dienen twee zaken te gebeuren: 1) de vragenlijst online zetten en 2) potentiële respondenten benaderen.
3.1 Vragenlijst online zetten De vragenlijst wordt online gezet door bij het options menu te kiezen voor “open” of door “deploy” aan te klikken en vervolgens te kiezen voor “launch”. De status verandert nu in “open” (zie figuur 3.1). Figuur 3.1 Vragenlijst staat nu online
LET OP!: op het moment dat een vragenlijst 1) online staat en 2) er is respons, kan de vragenlijst NIET meer aangepast worden zonder de verkregen data te wissen. Zorg dat er een back-up gemaakt is (zie hoofdstuk 2.2).
3.2 Potentiële respondenten benaderen Op het moment dat de vragenlijst online staat, dienen potentiële respondenten benaderd te worden en zij moeten weten waar de vragenlijst staat. Dit gebeurt met de optie “deploy” (zie figuur 3.2). Figuur 3.2 Optie “deploy”
26
Handleiding vragenlijsten maken met SelectSurvey V4.0 Potentiële respondenten kunnen op de volgende manieren benaderd worden: − Send Survey Invitations by Email • Met deze optie kunnen email adressen ingeladen worden en deze email adressen ontvangen vervolgens een uitnodiging om deel te nemen aan het onderzoek. • De optie werkt met een email lijst waarbij email adressen op afzonderlijke regels moeten staan, gescheiden door komma’s. Eventueel kunnen ook voor- en achternamen en andere velden weergegeven worden. • Email lijsten zijn alleen zichtbaar voor de beheerder(s) van de vragenlijst. • Met de optie “Send” kunnen uitnodigingen verstuurd worden • Bij email lijsten kan ook bijgehouden worden welke email adressen al deelgenomen hebben aan het onderzoek en welke niet. − Email Link • In dit veld staat een link naar de vragenlijst die handmatig gekopieerd kan worden (tekst selecteren en vervolgens <
> of rechter muisknop/optie kopiëren). Dit kan vervolgens in een email gebruikt worden. LET OP: Vergeet niet om nadat de link in de mail gekopieerd is op enter te drukken zodat de link geactiveerd (blauw) wordt. − Web Page Link • Hier staat de HTML code voor gebruik op een andere website (als de link op een andere website weergegeven moet worden). Door het aanpassen van de tekst kan de link subtiel verwerkt worden. Een bekend voorbeeld is: Klik op deze link! Vanwege het (niet) accepteren van cookies door bepaalde websites is het aan te raden om de volgende optie te gebruiken (Popup Survey Invitation Link). LET OP: Wanneer een bepaalde website geen cookies accepteert kan de enquête wel gemaakt worden maar zullen bepaalde opties niet werken (‘ piping’) en wordt de data niet opgeslagen in de database van Select Survey. − Popup Survey Invitation Link • Hier staat de HTML code als de link via een popup van een bepaalde website weergegeven moet worden. Deze optie werkt hetzelfde als de vorige maar nu zal er een popup venster verschijnen wanneer er op de link geklikt wordt. Deze optie is aan te raden voor gebruik op websites.
27
Handleiding vragenlijsten maken met SelectSurvey V4.0 Figuur 3.3 Invoerveld twee voor het versturen van email uitnodigingen
In figuur 3.3 is het standaard invoerveld voor email berichten weergegeven. Dit dient aangepast te worden aan het betreffende onderzoek. Variabele velden worden tussen # # gezet. Een voorbeeld van hoe dit aangepast kan worden staat in figuur 3.4.
28
Handleiding vragenlijsten maken met SelectSurvey V4.0 Figuur 3.4 Brontekst voor email bericht Beste #FirstName#, Op dit moment doen wij een kort onderzoek naar ... en wij willen u graag uitnodigen om deel te nemen aan dit onderzoek. De link naar dit onderzoek is: #SurveyLink# Als u niet wilt deelnemen aan het onderzoek kunt u dit aangeven door op onderstaande link te klikken: #DeclineLink# Bij voorbaat dank voor de genomen moeite. Met vriendelijke groet #Afzender# Het resultaat hiervan is een email bericht met de tekst: Figuur 3.5 De weergegeven tekst in het email bericht Beste [voornaam], Op dit moment doen wij een kort onderzoek naar [onderwerp] en wij willen u graag uitnodigen om deel te nemen aan dit onderzoek. De link naar dit onderzoek is: http://www.eurib-research.org/survey/TakeSurvey.aspx?EID=981B454B038BLG3B419B4L3BM3I Als u niet wilt deelnemen aan het onderzoek kunt u dit aangeven door op onderstaande link te klikken: http://www.eurib-research.org/survey/DeclineSurvey.aspx?EID=981B454B038BLG3B419B4L3BM3I Bij voorbaat dank voor de genomen moeite. Met vriendelijke groet, [afzender]
3.3 Back-ups en tussentijdse analyse Terwijl de vragenlijst online staat kunt u de gegevens al online bekijken (zie figuur 4.1 en figuur 4.2). LET OP: u bent zelf verantwoordelijk voor het tijdig maken van back-ups (functie export data zoals weergegeven in figuur 4.2). Mochten gegevens verloren gaan (u drukt bijvoorbeeld op “delete” in plaats van “analyze”2) dan is er geen mogelijkheid om de data terug te halen. Een gewaarschuwd mens telt voor twee…maak tijdens de veldwerkperiode geregeld een back-up van de data.
2
In dat geval vraagt het programma wel om een bevestiging (“Are you sure you want to delete this survey?”) 29
Handleiding vragenlijsten maken met SelectSurvey V4.0
H4 analyseren van data 4.1 Analyse in SelectSurvey SelectSurvey heeft een redelijk uitgebreide analyse module. Er kunnen frequentie tabellen, staafdiagrammen en pie charts gemaakt worden. Gemiddelden kunnen berekend worden. Zelfs per respondent kunnen de antwoorden uitgedraaid worden3. Er kunnen ook filters op de data gezet worden en zo bijvoorbeeld alleen de antwoorden van mannen weergegeven worden. SelectSurvey is geen statistisch pakket en kan geen geavanceerde analyses uitvoeren. Zo is het bijvoorbeeld niet mogelijk om kruistabellen te maken (hoewel ditzelfde resultaat met filters ook bereikt kan worden). Multivariate analyses zijn met SelectSurvey geheel niet mogelijk. Voor dit soort analyses is een statistisch pakket als SPSS uitermate geschikt.
Figuur 4.1 Menu analyze
Figuur 4.2 Rapportage van SelectSurvey
Let op: het is volgens de gedragscodes van de brancheorganisatie voor marktonderzoek niet toegestaan om individuele antwoorden aan een opdrachtgever te rapporteren tenzij een respondent daar toestemming voor gegeven heeft.
3
30
Handleiding vragenlijsten maken met SelectSurvey V4.0
4.2 Analyse in andere software pakketten (Excel, SPSS) In SelectSurvey zit een mogelijkheid waarmee data geëxporteerd kunnen worden. Dat gebeurt via een format dat we “CSV” noemen (een zogenaamd comma-delimited file). Dit format wordt gebruikt door pakketten als Microsoft Excel en SPSS. Hieronder wordt een export beschreven naar SPSS die via Excel loopt. Deze procedure werkt beter dan rechtstreeks van SelectSurvey naar SPSS exporteren. Mocht deze procedure niet werken (in het geval van grote databestanden kan dat voorkomen) dan is in bijlage III een alternatieve manier weergegeven om een export te realiseren.
Figuur 4.3 Exporteren van data
31
Handleiding vragenlijsten maken met SelectSurvey V4.0 Met behulp van de volgende stappen kunnen data naar SPSS geconverteerd worden: 1. Kies in de analyse module “export data” (zie figuur 4.1 en 4.2) 2. Kies vervolgens voor export format “CSV” en “SPSS Format Condensed” (figuur 4.3) 3. SelectSurvey vraagt vervolgens om het bestand op te slaan met als naam “SurveyReport.csv”, LET OP: sla het bestand met een ANDERE extensie op, bijvoorbeeld “SurveyReport.txt”. 4. Open Microsoft Excel en kies bij bestand openen voor alle files (“*.*”) en open het bestand, bijvoorbeeld “SurveyReport.txt”. 5. We komen bij de wizard tekst importeren o Stap 1 van 3: kies voor gescheiden gegevens o Stap 2 van 3: kies voor scheidingstekens Tab en Komma (zie figuur 4.4) o Stap 3 van 3: kies voltooien (resultaat in Excel: zie figuur 4.5) De respondenten staan nu in rijen, antwoorden in kolommen In de eerste rij staan de vragen De gegeven antwoorden staan als label in de cellen Als een respondent een bepaalde vraag niet beantwoord heeft is die betreffende cel leeg (in het voorbeeld heeft de eerste respondent alleen zijn leeftijd ingevuld) 6. Sla het bestand als Microsoft Excel bestand op, bijvoorbeeld “SurveyReport.xls”. 7. Sluit Excel. 8. Open SPSS en kies file/open/data, kies bij bestandstypen All files (*.*) en open “SurveyReport.xls, kies de optie “read variable names from the first row of data” 9. De data komen nu in SPSS te staan, net als in figuur 4.5 10. Sla de data op als SPSS data file (.sav –file). Vervolgens kunnen in SPSS analyse gedaan worden als: − Frequentie uitdraaien − Kruistabellen, eventueel met chi-kwadraat en/of t-toetsen Figuur 4.4 Wizard tekst importeren Excel
Figuur 4.5 Data in Excel A B geslacht man man vrouw man
C
Wat is uw algemeen (in leeftijd in jaren? het algemeen) 39 39 uitstekend 23 goed 44 uitstekend
D E algemeen (kwaliteit van de algemeen bediening) (wachttijden) zeer goed zeer goed zeer goed
goed matig uitstekend
F algemeen (parkeergelegenheden) matig slecht weet niet/nvt
32
Handleiding vragenlijsten maken met SelectSurvey V4.0
4.3 Geavanceerde analyses in SPSS De hiervoor beschreven export naar SPSS is voldoende voor de basis analyses. Echter, wanneer we multivariate analyses willen uitvoeren (bijvoorbeeld correlatie of regressie analyse) dan kan dat niet met de hiervoor beschreven procedure. Voor deze multivariate analyses moeten variabelen namelijk minimaal interval geschaald zijn en SPSS heeft numerieke waarden nodig om mee te rekenen. De beschreven export levert tekstuele waarden. Er bestaat een simpele truc om dit te verhelpen. Op het moment dat de data in Excel staan (dus na stap 5 van voorgaande paragraaf) kunnen de labels door middel van de “zoek/vervang” – functie omgezet worden in cijfers. We kunnen bijvoorbeeld het label “uitstekend” vervangen door een 5, “zeer goed” door een 4, “goed” door een 3, enzovoort. Figuur 4.6 geeft een voorbeeld hiervan. Figuur 4.6 Data in SPSS nadat in Excel labels door cijfers vervangen zijn A B C D E algemeen Wat is uw algemeen (in (kwaliteit van de algemeen geslacht bediening) leeftijd in jaren? het algemeen) (wachttijden) 39 man 39 5 4 3 man 23 3 4 2 vrouw 44 5 4 5 man
F algemeen (parkeergelegenheden) 2 1 99
LET OP: omdat dit handmatig gebeurt, is het foutgevoelig. Maak daarom altijd een frequentie uitdraai in SPSS en vergelijk dit met de data in SelectSurvey om mogelijk gemaakte fouten op te sporen.
Bovenstaande betekent dat in SPSS geen value labels staan voor de betreffende variabelen. Deze kunnen in het tabblad “variable view” (naast tabblad “data view”) aangemaakt worden. Als dit voor één variabele gedaan is kan dat met copy/paste naar andere variabelen met dezelfde antwoordschaal gekopieerd worden. Een andere manier om dit probleem van labels te omzeilen is door bij het ontwerp van de vragenlijst te kiezen voor vragen waarbij numerieke waarden toegekend kunnen worden. In plaats van Matrix – One Answer per Row (Option Buttons) wordt dan bijvoorbeeld gekozen voor Matrix – Rating Scale (Numeric). Nadeel van deze manier is dat er dan geen beschrijvende labels bij gezet kunnen worden (bijvoorbeeld van “uitstekend” tot “slecht”) maar dat er cijfers zonder toelichting staan (bijvoorbeeld van 1 tot 5). Het verdient de voorkeur om te redeneren vanuit methodologisch oogpunt en niet vanuit technisch oogpunt. Daarom is de manier zoals hierboven beschreven aan te bevelen.
33
Handleiding vragenlijsten maken met SelectSurvey V4.0
Bijlage I: overzicht van de menu opties Onderstaand staat een kort overzicht van de menu opties in SelectSurvey − Surveys o Vragenlijsten die aangemaakt zijn, beheren. − Libraries o Het aanmaken van een “bibliotheek” van standaard vragen en/of standaard antwoordschalen − Templates o Opmaak van vragenlijsten aanpassen, navigatieknoppen in het Nederlands weergeven. − Email Lists o Versturen van uitnodigingen om deel te nemen aan het onderzoek aan potentiële respondenten. − Reports o Rapporteren van uitkomsten van het onderzoek. o Exporteren van de data voor nadere analyse in andere software, bijvoorbeeld SPSS. (menu rechtsbovenin) − Logout o Uitloggen. − My account o Gebruikers gegevens beheren, password aanpassen, email adres aanpassen. o Een eenmaal toegekende username kan niet aangepast worden. (linker menu) − Help o Online helpfunctie (Engelstalig). − Manage folders o Folders aanmaken om vragenlijsten in te plaatsen. − Create new survey o Nieuwe vragenlijst aanmaken. − ResponseLogic o Niet geïnstalleerd.
34
Handleiding vragenlijsten maken met SelectSurvey V4.0
Bijlage II: instellen ActiveX controls SelectSurvey werkt alleen goed indien de “ActiveX controls” in de internet explorer aan staan. Indien deze niet aan staan zijn bijvoorbeeld de gemaakte vragenlijsten niet op te roepen (staan niet meer onder “Surveys”). Dit kan opgelost worden door: 1. ActiveX controls in de Internet Explorer aan te passen of 2. Niet Internet Explorer maar Mozilla Firefox als webbrowser te gebruiken (gratis software) Ad 1. Om instellingen in Internet Explorer te controleren/wijzigen, volg onderstaande aanwijzingen: Internet explorer 7 Engelstalig Internet explorer 7 Nederlandstalig Stap 1 Kijk in de Internet explorer onder Extra/Internetopties
Stap 2 Klik op “custom level” (“aangepast niveau”).
35
Handleiding vragenlijsten maken met SelectSurvey V4.0
Stap 3 Kies “Enable ActiveX controls” (“ActiveX-besturingselementen [die zijn gemarkeerd als veilig] Inschakelen”)
36
Handleiding vragenlijsten maken met SelectSurvey V4.0
Bijlage III: Export naar SPSS mogelijkheid 2 De ideale export vanuit SelectSurvey naar SPSS gebeurt via de optie “spss format condensed”. In een aantal gevallen (met name bij grotere databestanden) blijkt dat SelectSurvey daarop kan vastlopen. In die gevallen is er ook een mogelijkheid om het op een andere manier naar SPSS te exporteren. Voordat we beginnen met deze export maken we een print van de resultaten uit SelectSurvey. Daarna kiezen we bij het overzicht van de resultaten voor “export data” met de optie “CSV (Excel)” en “User Responses”. Eerst hernoemen we het bestand van surveyreport.csv naar surveyreport.txt, dan openen we het in Excel. De ‘wizard tekst importeren’ opent nu. Kies daarbij voor gescheiden en voor een komma als scheidingsteken.
37
Handleiding vragenlijsten maken met SelectSurvey V4.0 Het resultaat is onderstaand te zien: een Excel file waarin respondenten in rijen staan en variabelen in kolommen.
Er zijn nu nog een tweetal zaken op te lossen om te komen tot een SPSS file: 1. in het geval van matrix vragen staan meerdere variabelen in één kolom 2. er staan tekst antwoorden in het bestand terwijl SPSS analyses met getallen uitgevoerd moeten worden Kijk bijvoorbeeld naar onderstaande vraag: in de kolom professioneel staan drie vragen weergegeven (“professioneel”, ”informatief” en ”gebruiksvriendelijk”):
Er moeten eerst twee lege kolommen ingevoerd worden voor de vragen ”informatief” en ”gebruiksvriendelijk”), in dit geval worden dat kolom I en J:
38
Handleiding vragenlijsten maken met SelectSurvey V4.0 Vervolgens moeten de antwoorden in de juiste kolommen gezet worden. In Excel kan dat met de optie “tekst naar kolommen” (onder menu: Data/tekst naar kolommen):
Kies de optie met scheidingsteken puntkomma:
39
Handleiding vragenlijsten maken met SelectSurvey V4.0 De antwoorden staan nu in verschillende kolommen:
Nu moeten we zorgen dat de variabele naam alleen in de eerste regel komt en niet in iedere cel (zoals nu het geval is). Door 1) de kolom te blokken en 2) met zoek/vervang de teksten te wissen (bijvoorbeeld de tekst “ Professioneel = ” wordt vervangen door een leeg veld) komen we tot het volgende resultaat:
De namen van variabelen staan nu in de eerste rij, de antwoorden in de cellen. De antwoorden moeten nog van tekst naar getallen omgezet worden maar dat gebeurt pas op het laatst. We slaan het Excel bestand tussentijds op, bijvoorbeeld als ”resultaten1.xls”. Dezelfde werkwijze passen we toe op andere vragen waarbij meerdere variabelen in één kolom terecht gekomen zijn.
40
Handleiding vragenlijsten maken met SelectSurvey V4.0 Als we vervolgens multivariate analyses zoals correlatie of regressie willen toepassen dan moeten de variabelen waarop we dat toepassen minimaal ordinaal of op ratio niveau zijn. Bijvoorbeeld: als ik een algemeen oordeel, dat op een vijfpunt schaal gemeten is, wil verklaren dan heb ik weinig aan het label “uitstekend” maar dat moet in SPSS een “5” worden met het label “uitstekend”. Dat geldt dus voor alle variabelen waar mensen een waardeoordeel gevraagd wordt. Dat geldt NIET voor nominale variabelen. Bijvoorbeeld: geslacht, dat kan gewoon een tekstvariabele blijven. In een nominale variabele is namelijk geen rangorde gegeven. Wij kijken weer even naar de uitgangssituatie: Het Excel bestand ziet er zo uit:
Eerst slaan we het bestand op onder een andere naam, bijvoorbeeld “resultaten2.xls” zodat we, mocht er iets fout gaan, we de oude resultaten terug kunnen halen. De eerste variabele waar een oordeel in staat is de variabele “indruk”. Nu gaan we voor het gehele Excel blad de teksten met zoek/vervang omzetten in cijfers. Het label “uitstekend” wordt een 5, het label “zeer goed” wordt een 4 etcetera (zie onderstaand figuur, kies onder opties voor Identieke hoofdletters/kleine letters). “Weet niet/nvt” geven we bijvoorbeeld het cijfer 99. Dat doen we ook voor andere antwoordcategorieën, bijvoorbeeld: “past zeer goed” wordt een 4, “past goed” wordt een 3, “past niet” wordt een 2, “past geheel niet” wordt een 1 en “Geen indruk” wordt een 99. En “Volledig eens” wordt een 5, “Eens” wordt een 4, etcetera. Het label “Zeer hoog” wordt een 5, “Hoog” een 4, etc. Tenslotte vervangen we het label “[No Answer Entered]” door een leeg veld.
41
Handleiding vragenlijsten maken met SelectSurvey V4.0 Het resultaat is een bestand dat er uitziet als onderstaand:
Dit bestand is geschikt voor multivariate analyses in SPSS, we slaan het op, bijvoorbeeld als “resultaten3.xls”. Vervolgens openen we het bestand in SPSS met de optie “read variable names from the first row of data”:
42
Handleiding vragenlijsten maken met SelectSurvey V4.0 Als we na het importeren van gegevens in SPSS op tabblad “variable view” klikken dan zien we het volgende:
In dit geval staat er een nieuwe variabele bij, V15. Deze naam is door SPSS gekozen omdat de naam “professioneel” als een keer gebruikt is als variabele naam. We geven variabele V15 bijvoorbeeld de naam “prof2”. Verder zien we dat een aantal variabelen waar we de tekst in getallen omgezet hebben, nog steeds als “String” gedefinieerd zijn: daar maken we “Numeric” van. Tenslotte controleren we of de numerieke variabelen in de laatste kolom als “ordinal” aangemerkt zijn. Ordinaal is meestal van toepassing op schaalvariabelen (ordinaal = er zit een volgorde in de antwoorden). Scale staat voor variabelen waar je een “meetlat” langs kunt leggen (interval of ratio schaal), bijvoorbeeld temperatuur. In marktonderzoek komen we die schaal weinig tegen. Tenslotte zetten we de labels in SPSS er weer bij en vergelijken we de uitdraai van de resultaten met de uitdraai uit SelectSurvey als laatste check om te voorkomen dat fouten onopgemerkt blijven.
43