HAPP - Harmonized Appraisal

in samenwerking met Colin Lee
Graphic showing green HAPPY text surrounded by scattered paper sheets with lines and checkmarks

Harmonized Appraisal (HAPP) is een feedbackmethode die beoordeling en feedback integreert in één evaluatieproces. Deze pagina legt uit wanneer je HAPP gebruikt, hoe je het stap voor stap implementeert en biedt praktische tips en bronnen om je op weg te helpen.

Wat is HAPP?

HAPP is een beoordelings- en feedbackmethode, ondersteund door een Canvas-applicatie, die toetsing en feedback integreert in één evaluatieproces. In plaats van eerst te beoordelen en daarna feedback te schrijven, stelt HAPP je in staat om zowel een cijfer als rijke, consistente feedback te produceren vanuit hetzelfde oordeel. Het is ontworpen voor opdrachten zoals essays, rapporten, presentaties, rollenspellen en casestudy's, en is geschikt voor elke toetsing die met een analytische rubric kan worden geëvalueerd.

Stylized “happ” logo in purple gradient lettering

Waarom HAPP?

Goede feedback helpt studenten leren, maar vooral in grotere cursussen kan het geven van gedetailleerde individuele feedback een uitdaging zijn.

Overweeg HAPP wanneer je:

  • Rijke, gepersonaliseerde feedback op schaal wilt geven.
  • Consistentie tussen meerdere beoordelaars wilt waarborgen.
  • Middelgrote tot grote cohorten eerlijk en transparant wilt beoordelen.
  • Cijfergeschillen wilt verminderen door een meer gestructureerd beoordelingsproces.
  • Je beoordelingsformulier in toekomstige iteraties wilt hergebruiken om tijd te besparen en consistentie te waarborgen.

Stapsgewijs implementatieplan

Activeer HAPP voor je Canvas-cursus

HAPP is beschikbaar als Canvas-applicatie binnen de EUR (met uitzondering van Erasmus MC). Neem contact op met je Canvas-applicatiebeheerder met je cursuscode of Canvas-URL om HAPP voor je cursus te activeren.

Start vanuit een rubric

Maak of importeer eerst een analytische rubric in HAPP. Deze rubric moet gebaseerd zijn op je toetsmatrix. De rubric definieert de beoordelingscriteria en prestatieniveaus en kan naar Canvas worden gepubliceerd om studenten te helpen begrijpen hoe hun werk wordt beoordeeld.

Stel het beoordelingsformulier op (de docentrubric)

Splits elk criterium uit je rubric op in specifieke facetten: de onafhankelijke, waarneembare onderdelen van het studentenwerk waarop je je beoordelingen baseert. Definieer voor elk facet vinkniveaus (dit worden de niveaus in je dropdowns) en schrijf de standaardfeedback die bij elk niveau hoort. Je kunt GenAI binnen HAPP gebruiken of AI-gegenereerde content importeren om dit proces te versnellen. Deze opzet hoeft slechts één keer te worden voltooid en kan worden hergebruikt voor toekomstige cursusiteraties.

Voeg slimme personalisatie toe (optioneel)

Pas het feedbackbericht aan door de template te bewerken, inclusief cijferafhankelijke openings- en slotparagrafen (bijvoorbeeld een felicitatietoon voor hogere cijfers). Je kunt ook placeholders toevoegen voor opdrachtspecifieke variabelen per student, zoals een bedrijf, land of analytische techniek, om feedback verder te personaliseren.

Start met beoordelen

HAPP haalt automatisch inzendingen op uit Canvas, of je kunt links naar externe inzendingen toevoegen. Als er meerdere beoordelaars betrokken zijn, kun je inzendingen aan specifieke beoordelaars toewijzen. Je beoordeelt elke inzending door de facetten te scoren met dropdownniveaus, terwijl je scores en feedback statements waar nodig aanpast. De inzending wordt onderaan het scherm weergegeven of kan in een apart tabblad worden geopend. Zodra je een inzending finaliseert, aggregeert HAPP de scores naar rubric- en opdrachtniveau en genereert het een feedbackbericht op basis van de geselecteerde feedback statements en template.

Publiceer de cijfers en feedback naar Canvas

Zodra je de beoordelingen hebt voltooid en gefinaliseerd, kun je de cijfers en feedback naar Canvas publiceren. Controleer vóór publicatie het publicatiebeleid van de opdracht in Canvas om er zeker van te zijn dat studenten hun beoordelingen kunnen bekijken.

Tips & tricks

Het maken van het perfecte beoordelingsformulier kost tijd, en je ontdekt vaak verbeteringen tijdens het beoordelen. Als je de enige beoordelaar bent, begin dan met een basisversie en verfijn deze tijdens het proces. Met HAPP kun je feedback statements en scores aanpassen en nieuwe dropdownniveaus toevoegen rechtstreeks vanuit het beoordelingsformulier.

Wanneer er meerdere beoordelaars betrokken zijn, begin dan met het samen beoordelen van een paar inzendingen en bespreek jullie interpretaties van kwaliteit en drempels. Dit helpt beoordelingsbeslissingen op elkaar af te stemmen, iedereen vertrouwd te maken met HAPP en ervoor te zorgen dat beoordelaars weten wanneer ze scores moeten aanpassen of feedback statements moeten personaliseren. HAPP bevat ook een kalibratiefunctie waarmee je externe inzendingen voor dit doel kunt gebruiken. Kalibratie verbetert de consistentie tussen beoordelaars en helpt studenten hun feedback beter te waarderen.

Wanneer je HAPP hergebruikt voor een opdracht, gebruik dan evaluatierapporten om patronen in je rubric te identificeren. Vaak gewijzigde feedback statements of scores kunnen bijvoorbeeld laten zien waar aanpassingen nodig zijn.

Schrijf feedback statements die duidelijk aangeven wat studenten kunnen verbeteren. Specifieke feedback helpt studenten niet alleen te begrijpen wat er misging, maar ook wat ze vervolgens kunnen doen (dat wil zeggen: feedforward).

GenAI kan je helpen een eerste versie van je docentrubric en commentaarbank te maken, waardoor de opzettijd wordt verkort. HAPP's geïntegreerde GenAI-ondersteuning kan facetten en feedback statements genereren, zodat beoordelaars zich kunnen richten op de beoordeling zelf. Het uiteindelijke oordeel blijft altijd bij de beoordelaar.

Verder lezen

Er zijn verschillende bronnen die je kunt gebruiken om aan de slag te gaan of je gebruik van HAPP te verbeteren.

Vragen?

Als je vragen of verzoeken hebt, neem dan gerust contact op via happ@rsm.nl.

HAPP is ontwikkeld aan Rotterdam School of Management, Erasmus University, en omgezet in een Canvas-webapplicatie door het RSM Digitalization and Information Services (RDIS)-team.

Projectteam

  • Colin Lee
    Colin Lee

    Assistant professor RSM

    Dr. Colin Lee is universitair docent Human Resource Management aan Rotterdam School of Management (RSM). In 2022 won hij de RSM Innovative Teaching Award voor de ontwikkeling van de HAPP-methodologie. In 2024 werd zijn artikel over HAPP erkend als het artikel met de meest significante bijdrage aan managementonderwijs op de jaarlijkse Academy of Management-conferentie.
  • Jamie Verstraeten
    Jamie Verstraeten

    Onderwijsconsultant Risbo

    Jamie is onderwijsconsultant en trainer bij Risbo, met een focus op docentprofessionalisering, toetsing en evaluatie en onderzoek. Als lid van het TestEUR-team vindt ze het leuk om docenten te inspireren nieuwe toetsbenaderingen te verkennen en hun toetsingspraktijk te verbeteren.
  • Esther Schut
    Esther Schut

    Onderwijsconsultant Risbo

    Esther is onderwijsconsultant en trainer bij Risbo, met een focus op docentprofessionalisering en het evalueren van onderwijsimpact. Als lid van het TestEUR-team deelt ze graag haar kennis op een praktische en boeiende manier. Via de nieuwe themapagina van TestEUR inspireert ze docenten om hun didactische vaardigheden verder te ontwikkelen.
Funded by the European Union NextGenerationEU logo

Vergelijk @count opleiding

  • @title

    • Tijdsduur: @duration
Vergelijk opleidingen