Turnitin: sneller nakijken peer feedback Wat kan het? Met Turnitin kunt u: • • •
veel tijd besparen bij het nakijken van papers (mogelijk) betere feedback leveren gebruiken maken van peer feedback
Wat doet het? Turnitin stelt u in staat om sneller na te kijken doordat het geven van feedback veel makkelijker gaat. De eerste keer dat u een student bijvoorbeeld laat weten dat de gebruikte taal te populair is, maakt u daar eenvoudig een knop voor aan. Deze knop kan dan voor elke opvolgende paper (ook voor andere opdrachten en vakken) direct worden hergebruikt. Elke keer dat u daarna die feedback wilt leveren, hoeft u die knop alleen nog maar naar de debestreffende zin of alinea te slepen. Bij de opleiding Psychologie van de UvA wordt Turnitin al een tijd gebruikt en bij een recente evaluatie gaven docenten aan dat ze voor dat vak niet alleen minder tijd kwijt waren aan nakijken maar dat ze zelf vonden dat ze ook betere feedback gaven. Daarnaast stelt Turnitin u in staat om studenten elkaars opdrachten na te laten kijken. Denk bijvoorbeeld aan vakken als Schrijfvaardigheid of een eerste versie van een opdracht. Het gaat hier nadrukkelijk niet om het uitbesteden van nakijkwerk aan besteden maar om het didactische nut van peer feedback. Aan de hand van vragen die u opstelt, analyseren studenten het werk van hun medestudenten en leren zij van elkaar.
Hoe werkt het? Turnitin heeft twee tools: Grademark en Peermark. Met Grademark kunt u zelf makkelijk papers nakijken. Met Peermark kunnen studenten elkaars opdrachten nakijken. De tools zijn zowel los als samen te gebruiken.
Ultrakorte handleiding: Grademark: u maakt in Turnitin een Grademark Assignment aan. Studenten leveren hun opdracht in en u kijkt het na via de knoppen die u heeft aangemaakt. De studenten lezen hun feedback in Turnitin of printen/bewaren deze als PDF. Peermark: u maakt eerst een Grademark Assignment aan (maar u hoeft Grademark niet per se te gebruiken) en koppelt daarna Peermark aan de Grademark Assignment. U geeft aan volgens welke criteria de studenten de papers moeten beoordelen en bepaalt hoeveel papers elke student moet nakijken. De student levert zijn of haar opdracht in en krijgt dan een een opdracht van een medestudent toegewezen. De student beoordeelt het werk van zijn medestudent en ontvangt op zijn beurt de feedback op zijn paper. Eventueel kunt u dan de opdrachten zelf nog nakijken of de peer feedback beoordelen.
Wat kost het? Turnitin is gratis voor docenten van FGw maar het vereist aan het begin wel een investering van uw tijd, zowel om het systeem te leren kennen als om het naar wens in te richten. Desondanks kan het u veel tijd besparen bij het nakijken van opdrachten en papers. Elke keer dat u een knop aanmaakt om bepaalde feedback (“onduidelijke vraagstelling” bijvoorbeeld) te geven, kunt u die namelijk voor elke opvolgende paper direct en makkelijk hergebruiken. U hoeft dan alleen nog maar de knop naar de juiste plek in de tekst te slepen (of tekst te selecteren en dan een knop te kiezen). Daarna kunt u niet alleen veel tijd besparen bij het nakijken van papers maar ook gebruik maken van peer feedback.
Het enige nadeel is dat Turnitin op dit moment nog niet is gekoppeld aan Blackboard. Wij willen dit echter erg graag hebben en zijn bezig met de lobby om Blackboard en Turnitin te koppelen.
Wat krijg ik ervoor terug? U krijgt veel ondersteuning bij het gebruik van Turnitin. Deze ondersteuning behelst nadrukkelijk meer dan alleen deze handleiding. Zo kunnen we u helpen met het klaarzetten van standaard Quickmark sets en met het toevoegen van studenten. Natuurlijk helpen we u met alle vragen die u over Turnitin heeft. Daarnaast garanderen wij dat dit systeem de komende jaren bij FGw in gebruik zal blijven omdat de faculteit zelf een licentie op het systeem heeft en hiervoor dus niet is gebonden aan andere gebruikers en wensen binnen de UvA. Er zijn bovendien op dit moment geen goede concurrenten van Turnitin, zeker niet voor Grademark en Peermark. Turnitin blijft dus in gebruik bij FGw.
Vervangt dit Ephorus? Nee, op dit moment niet. FGw gebruikt Ephorus voorlopig als standaard plagiaatscanner en zet Turnitin in voor het makkelijk nakijken van papers en het kunnen toepassen van peer feedback. Turnitin heeft weliswaar ook een plagiaatscanner maar deze kunt u niet gebruiken omdat Ephorus leidend is als u plagiaat vermoedt. Examencommissies zullen dus altijd van Ephorus uitgaan. De plagiaatscanner van Turnitin is helaas niet uit te zetten vandaar dat we u erop willen wijzen dat Turnitin het percentage overeenkomsten iets ander opbouwt dan Ephorus. Waar Ephorus het hoogste percentage overeenkomst toont, laat Turnitin een cumulatief percentage zien. Voorbeeld: een tekst toont overeenkomsten met twee bronnen, 23% met de één en 10% met de ander. Ephorus meldt dan dat er 23% overeenkomst is gevonden, Turnitin zal 33% melden. Plagiaatrapportages van Turnitin kunnen dus onbedoeld hoger lijken dan in Ephorus.
iPad functionaliteit Als u een iPad heeft, kunt u de applicatie van Turnitin (gratis te downloaden via de app store) gebruiken. U kunt dan niet alleen op uw iPad werken maar er is ook een offline modus. De applicatie downloadt dan alle ingeleverde papers en u kunt dan nakijken ook wanneer u geen internettoegang heeft, bijvoorbeeld in de trein. Als u weer online bent, synchroniseert de applicatie uw werk en komt de feedback beschikbaar voor studenten. Let op: Turnitin raadt aan om bij gebruik van hun applicatie uw iPad te beveiligen door de “passcode lock” te gebruiken. Dan moet u een passcode invoeren (bijvoorbeeld vier cijfers) om de iPad uit slaapstand te halen. Dit voorkomt toegang tot de bestanden mocht u uw iPad kwijtraken. Deze optie vindt u bij de instellingen van uw iPad onder “General Settings”.
Procedure 1. U mailt
[email protected] dat u Turnitin wil gebruiken. Wij maken dan een account voor u aan. Ook zetten wij kant en klare “libraries” klaar waarmee u direct al veelgestelde feedback kunt geven. 2. U logt in met uw account en maakt een class aan per vak of werkgroep. 3. U maakt opdrachten aan en kiest of u alleen Grademark wilt gebruiken (makkelijk nakijken) of dat u ook Peermark (voor peer feedback) wilt gebruiken. 4. U nodigt studenten uit zodat zij aan de slag kunnen. 5. Nakijken van papers, bekijken van resultaten van peer feedback. In deze handleiding staat per punt uitgelegd wat u moet doen.
Handleiding Turnitin
1.
Account aanvragen
4
2.
Inloggen en classes aanmaken
4
3.
Assignments aanmaken
6
3.1
Grademark assignment
3.1.1. Grademark Assignment aanmaken
6
3.1.2 Quickmarks aanmaken
6
3.2 Peermark assignments
4.
5.
6
8
3.2.1 Peermark Assignment aanmaken
8
3.2.2 Peer review instellen
9
Studenten
10
4.1
Studenten toevoegen
10
4.2
Studenten gaan aan de slag
11
Nakijken 5.1
Nakijken van Grademark assignments
5.1.1 Grademark Report (overzicht gegegen feedback) 5.2
Nakijken van Peermark Assignments
13 13 14 14
1. Account aanvragen Stuur een mail naar
[email protected] en vermeld uw UvAnetID.
2. Inloggen en classes aanmaken U krijgt een mail van Turnitin en met een link om in te loggen ( http://www.turnitin.com/ ) en uw gebruikersnaam (meestal uw UvA mailadres) en een willekeurig gegenereerd wachtwoord. Log hiermee in, rechtsboven op de website.
U krijgt een soortgelijk overzicht te zien:
Klik daarna op Add Class. Opmerkingen bij Classes: Aan een Class is over het algemeen alleen beschikbaar voor één docent, degene die de Class aanmaakt. Hou daar dus rekening mee bij het aanmaken van Classes (één per werkgroep die u geeft bijvoorbeeld). De uitzondering op de regel is de master class optie die u kunt activeren bij het aanmaken van een Class (of later alsnog via Edit bij de eigenschappen van een Class). Met een master class kunt u de class onderverdelen in sections en aan elke sectie een docent (met als rol “teaching assistant” toevoegen. Een master class kan handig zijn als één docent allerlei opdrachten voor een vak maakt omddat die naar de sections gestuurd kunnen worden. Als er verschillende opdrachten zijn, is het echter veel handiger als elke docent zelf classes aanmaakt voor zijn/haar werkgroepen.
Vul een naam en een enrollment password in. Vermeld altijd het collegejaar en semester zodat uw account overzichtelijk blijft Het enrollment password moet u aan de studenten laten weten zodat ze bij uw Class kunnen komen. Gebruik dus bijvoorbeeld iets algemeens of een term die aan de inhoud van het vak is verbonden. Zorg ervoor dat de Class end date is ingesteld na het eind van het blok of semester in kwestie. Klik op Submit.
U krijgt een bevestigingsvenster met het Class ID (nodig als studenten zichzelf moeten enrollen) en het gekozen Enrollment password. De nieuwe Class komt nu in uw overzicht te staan.
3. Assignments aanmaken 3.1
Grademark assignment
3.1.1. Grademark Assignment aanmaken Klik op de gewenste Class en klik daarna op Add Assignment. Geef de opdracht een duidelijke naam (bijvoorbeeld door ook het weeknummer te vermelden) en een aantal punten (10 bijvoorbeeld). Geef de opdracht een duidelijke naam (bijvoorbeeld door ook het weeknummer te vermelden) en een aantal punten (10 bijvoorbeeld). Controleer goed wat de Start date, Due Date en Post Date van de Grade Mark Assignment moeten zijn: • Start date: het moment dat de assignment beschikbaar wordt en studenten de opdracht kunnen inleveren • Due date: de deadline van de assignment • Post date: het moment waarop studenten de door de docent geplaatste feedback kunnen zien.
Daarnaast zijn er Optional settings: hier kunt u bijvoorbeeld instructies voor de opdracht kwijt of aangeven of opdrachten na de Due Date mogen worden ingeleverd (zo ja, dan worden als ze als “late” gekenmerkt) etc. Klik op Submit als u alles heeft ingevuld. De Grademark assignment is nu aangemaakt. In het overzicht van Assignments van die Class kunt u via More Actions desgewenst de assignment aanpassen of wissen.
3.1.2 Quickmarks aanmaken Quickmarks zijn knoppen waarmee u makkelijk één type feedback geeft. Een Quickmark Set is een verzameling van knoppen. Het inrichten van Quickmarks is een cruciaal onderdeel van het gebruik van Grademark bij Turnitin. Denk goed na over het soort feedback dat u wilt geven en hoe u het wilt toepassen (geeft u bijvoorbeeld bepaalde feedback één keer per paper of geeft u de feedback overal waar dit relevant is in de ingeleverde paper). Overleg waar relevant met collega’s zodat u samen gelijke feedback geeft.
3.1.2.1 Quickmark set delen Een snelle methode is om de Quickmarks van een collega te gebruiken. De Quickmark Set moet worden gedeeld met uw account door de beheerders (ICTO FGw). Stuur dus een mail naar
[email protected] en vermeld om welke Quickmark Set van welke docent het gaat.
3.1.2.3 Quickmark set samenstellen
Een andere optie is om zelf een set samen te stellen. Dit kunt u doen door naar een willekeurige Class te gaan en daar op Libraries (in de rij tabbladen bovenaan) te klikken en vervolgens naar de Quickmark Manager te gaan.
Normaal staat een Commonly used set als standaard ingesteld. Deze kunt u niet wijzigen maar natuurlijk wel gebruiken.
Beter is het om een nieuwe set aan te maken: klik bij Sets op de + knop en geef de set een duidelijke naam, bijvoorbeeld die van het betreffende vak en klik op Save.
Nu kunt u: • een bestaande Quickmark selecteren (uit een willekeurige Quickmark Set) en dan via Actions toevoegen (Add to Set)
•
of een nieuwe Quickmark aanmaken door bij Marks op + te klikken. Geef het een korte maar duidelijke titel. Vul ook de description in met een langere uitleg van de fout. Klik op Save.
Aanbevolen wordt om bij het begin van het gebruik van Grademark de quickmarks in categorieën onder te verdelen, bijvoorbeeld 1.x voor feedback gerelateerd aan spelling, 2.x voor grammatica, 3.x voor de structuur van de paper etc).
Tenslotte moet u de aangemaakte Set te activeren. Ga daarvoor naar de Set en klik op Make this the active set. Standaard zal deze Set nu als eerste worden getoond bij het gebruik van Grademark maar u kunt ten alle tijden nog wisselen tussen sets, ook tijdens het nakijken.
3.2 Peermark assignments Met Peermark kunt u een bestaande Assignment in Turnitin zó inrichten dat studenten elkaars opdracht kunnen nakijken. Als docent geeft u aan hoe de studenten de papers moeten beoordelen. Een Peermark Assignment heeft altijd een bestaande Grademark assignment nodig. U hoeft echter Grademark niet per se te gebruiken: als u alleen Peermark wilt gebruiken, kunt u gewoon een Grademark assignment aanmaken en dan hoeft u daar verder niets mee te doen.
3.2.1 Peermark Assignment aanmaken •
Ga naar de gewenste class en klik op Add Assignment.
•
Kies Peermark Assignment en klik op Next Step.
Kies de assignment die u eerder had aangemaakt. Vul eventueel een point value in (10 bijv.) Vul daarna de Assignment dates in: • Start Date: het tijdstip waarop studenten kunnen beginnen met het lezen en beoordelen van elkaars opdrachten Let op: (stel deze dus in na de deadline voor het inleveren van de Grademark assignment) • Due date: de deadline voor het inleveren van beoordelingen • Post date: het tijdstip waarop studenten toegang krijgen tot de feedback van hun medestudenten
Klik op Save & Continue.
Geef hier aan hoeveel opdrachten studenten moeten beoordelen. De standaardinstelling is dat een student één opdracht moet nakijken van een door Turnitin willekeurig toegewezen medestudent. Klik op Edit om deze instelling te wijzigen. De automatische optie blijft mogelijk maar nu kunt u ook instellen dat een student zelf een opdracht uitkiest en/of dat een student de eigen opdracht moet beoordelen. Bij Show more options staat de mogelijkheid om studenten te “koppelen” of juist te voorkomen dat bepaalde studenten elkaars opdracht mogen nakijken. Onderaan toont Turnitin automatisch het totaal aantal opdrachten dat elke student moet beoordelen. Klik op Save en daarna op Save & Continue.
3.2.2 Peer review instellen In het volgende venster kunt u aangeven hoe studenten de opdrachten moeten beoordelen. U kunt bovenaan instructies toevoegen (Click here to add instructions) maar ook standaardvragen toevoegen. De opties zijn: • Free response (open vraag) waar u in kunt stellen hoeveel woorden de beoordeling minimaal moet bevatten. Klik op Add Question om de vraag op te slaan. • Scale (Likertscale) • Library (standaardvragen). Uit een reeks standaardvragen kunt u één of meerdere vragen toevoegen (Add this question) Als u klaar bent met het toevoegen, klik op Finished adding questions from libary. Deze combinatie van vragen (Free Response, Scale en Library vragen) kunt u opslaan in een eigen Libary zodat u die makkelijk kunt hergebruiken bij een volgende Peermark assignment (Save to library). Geef de Library een duidelijke naam zodat u deze de volgende keer makkelijk herkent. Klik op Save & Finish om alle instellingen op te slaan.
De Peermark assignment is nu aangemaakt en kan nu (afhankelijk van de gekozen tijdstippen) door studenten gebruikt worden.
4. Studenten 4.1
Studenten toevoegen
Er zijn twee manieren om studenten toe te voegen: u kunt een uitnodiging sturen of studenten voegen zichzelf toe.
Zelf toevoegen: Als studenten al een account hebben en Turnitin dus al kennen, kan dit een handige optie zijn. Als u hen het Class ID en enrollment passwordt stuurt (via Blackboard bijvoorbeeld) kunnen zij zichzelf toevoegen. Het Class ID vindt u in het hoofdmenu, links van de naam van de class. Het wachtwoord vindt u als u op het tandrad onder Edit klikt (bij de gewenste Class).
Studenten uitnodigen Klik bij het tabblad Students op Upload Student List om een lijst van studenten aan Turnitin toe te voegen. Het moet in Word, Excel of tekstformaat zijn (.doc, .docx, .xls, .xlsx, .txt of .csv) met in deze volgorde: voornaam, achternaam, mail adres. Deze lijst kunt u bijvoorbeeld uit Blackboard halen en in Excel bewerken maar u kunt dit ook aan ons (
[email protected] ) vragen. Vermeld dan om welk vak en/of welke werkgroepen het gaat, dan mailen we u een bestand dat u direct kunt uploaden.
Upload het bestand via Choose File en klik op Upload List. Als het bestand is verwerkt, krijgen studenten automatisch een mail van Turnitin. •
•
Als ze al een account hebben bij Turnitin, worden ze aan uw Class toegevoegd en krijgen ze hiervan bericht. Als ze nog geen account hebben, wordt deze voor ze aangemaakt. De inloggegevens krijgen ze via mail. Ook worden ze aan uw Class toegevoegd.
4.2 Studenten gaan aan de slag Als een student inlogt bij Turnitin, ziet deze zijn of haar Classes staan. In een Class ziet een student vervolgens een dergelijk overzicht: bovenaan een reguliere Grademark Assignment, daaronder (eventueel) de Peermark assignment die daarbij hoort.
Via Submit kan de student de eigen opdracht inleveren. Als de opdracht is nagekeken door de docent, licht View op en kan de student de feedback lezen. Via de download pijl kan hij dan zijn opdracht met de feedback van de docent downloaden. Via Write reviews en daarna Get Started bij de gewenste optie ziet de student wat deze kan beoordelen.
De student krijgt vervolgens links de opdracht te zien en rechts in een kolom de vragen die over deze opdracht moeten worden beantwoord. Als de student klaar is, moet deze via Submit de beoordeling opslaan (de optie Save slaat het tijdelijk op zodat de student later verder kan werken maar daarmee wordt de opdracht niet ingeleverd)
5. Nakijken 5.1
Nakijken van Grademark assignments
In de Class pagina ziet u wat de status is van de opdrachten en beoordelingen.
Via View ziet u wat welke student heeft gedaan: het inleveren van opdrachten en het leveren van peer feedback.
Klik op de paper om te beginnen met het nakijken. De paper wordt getoond aan de linkerkant van het scherm. In de rechterkolom staat de als standaard geselecteerde Quickmark Set.
Via de knop links van de naam van de Quickmark Set kunt u de Set wisselen. Met de moersleutel rechts daarvan heeft u direct toegang tot de Quickmark Manager voor het wijzigen van Quickmarks.
U kunt nu tekst uit de ingeleverde opdracht selecteren en de gewenste Quickmark selecteren. Via Comment kunt u algemene feedback leveren over de opdracht. Alle wijzigingen worden automatisch opgeslagen.
5.1.1 Grademark Report (overzicht gegegen feedback) Als u klaar bent met het nakijken, kunt u in het overzicht van de Assignment op Grademark Report klikken om een overzicht te krijgen van hoeveel feedback per categorie is geleverd.
Standaard toont Turnitin in dit overzicht de feedback van alle Quickmark Sets. Als u echter één Quickmark Set heeft gebruikt, kunt op onder die Set op Details klikken om alsnog dezelfde informatie te krijgen.
5.2
Nakijken van Peermark Assignments
Open Show Details en klik bijvoorbeeld op Read Review bij de gewenste paper of klik op “read all these reviews at once”.
Daarnaast kun u via More actions\ Write instructor review van de door de student gegeven feedback becommentariëren of via More Actions\Read all reviews student submitted alle gegeven peerfeedback van die student bekijken en desgewenst beoordelen.