Bijlage 1 Regeling beoordelingsnormen doorstroomtoets PO Bonaire: de procedure om te komen tot de beoordelingsnormen van de doorstroomtoets PO Bonaire
Regeling beoordelingsnormen doorstroomtoets PO Bonaire
Bijlage behorende bij artikel 1 van de Regeling beoordelingsnormen doorstroomtoets po Bonaire. De Regeling beoordelingsnormen doorstroomtoets po Bonaire bevat algemeen verbindende voorschriften voor een toetsaanbieder van een tot het stelsel toegelaten doorstroomtoets po Bonaire. De Regeling beoordelingskader doorstroomtoets po Bonaire schrijft voor dat een toets alleen zal worden erkend als de procedure om te komen tot de beoordelingsnormen van de doorstroomtoets po Bonaire wordt gevolgd. De Regeling beoordelingsnormen doorstroomtoets po Bonaire beschrijft de inhoud en de processtappen van de volgende sleutelonderdelen, met verwijzing naar de paragrafen met kwaliteitseisen zoals opgenomen in de Regeling beoordelingskader doorstroomtoets po Bonaire: Een doorstroomtoets wordt erkend door het CvTE voor een periode van vier jaar, mits deze voldoet aan de voorwaarden voor erkenning en de regeling beoordelingskader doorstroomtoets po Bonaire. Jaarlijks zal het CvTE vaststellen of de in dat schooljaar aan te bieden erkende doorstroomtoets voldoet aan de criteria op basis waarvan de erkenning is verleend. De erkende doorstroomtoets is onderdeel van de jaarlijks door een adviseur uit te voeren controle op de normering zoals beschreven in deze Regeling beoordelingsnormen doorstroomtoets po Bonaire. Als de doorstroomtoets niet (langer) aan de voorschriften van deze Regeling beoordelingsnormen doorstroomtoets po Bonaire voldoet, kan de erkenning door het CvTE worden ingetrokken op grond van artikel 3a, vierde lid, van de Wet College voor toetsen en examens. Anker Het anker bestaat uit opgaven die in twee of meer toetsen over de jaren heen worden opgenomen om de opgaven van iedere toets jaarlijks op dezelfde, vergelijkbare schaal te kunnen brengen. Ankerbank De bank met vastgestelde ankeropgaven. Ankeropgave Een opgave in het anker. Betrouwbaarheid Mate waarin de toetsscores vrij zijn van toevallige meetfouten. Cesuur Minimale prestatie (gerepresenteerd als vaardigheid of toets
- 1. Ter voorbereiding op de normering: anker;
- 2. De normering en diens datalevering aan de adviseur;
- 3. Na afronding van de normering: datalevering t.b.v. toelatings- en doorstroomonderzoek (hierna: doorstroomonderzoek).
- • Het anker wordt gebruikt om de toetsadviezen en de behaalde referentieniveaus voor Lezen en Luisteren van Nederlands als vreemde taal, Lezen en Taalverzorging van Papiamentu en Rekenen over de jaren heen te equivaleren.
- • Het anker voor een bepaald afnamejaar is gebaseerd op het voor dat jaar geldende beoordelingskader, toetswijzer en toetsbesluit1Voor de meest recente publicaties zie https://www.cvte.nl/onderwerpen/toetsen-primair-onderwijs.
- • De toetsmatrijs is de basis voor het ontwikkelen van nieuwe ankeropgaven (zie paragraaf 2.4).
- • De toetsaanbieder zorgt voor geheimhouding van de ankeropgaven. De inhoud van ankeropgaven wordt alleen gedeeld via een speciaal hiervoor opgezette terminal server, en dus niet via e-mail of online vergaderingen. Gecontroleerde exposure van de opgaven draagt ook bij aan de geheimhouding.
- • De jaarsets van het anker worden jaarlijks vernieuwd volgens de hieronder beschreven verversingsstrategie (zie 2.2.1F).
- • Het anker wordt in de doorstroomtoets op een manier afgenomen zodat de prestatie op deze opgaven de potentie van leerlingen reflecteert.
- • Het is belangrijk dat er in elke jaarset van het anker opgaven opgenomen zijn die in een eerdere afname gebruikt zijn. De doorstroomtoets van het jaar 2026 voor Bonaire fungeert als ankerbank voor de navolgende jaren. Op die manier bestaat er een link tussen de verschillende jaarsets van het anker.
- • Het CvTE stelt de jaarset van het anker vast. Een jaarset kan daarna niet meer gewijzigd worden, tenzij na afname van het er aan voorafgaande jaar een opgave psychometrisch niet blijkt te functioneren als anker.
- • Ankeropgaven moeten voldoen aan de kwaliteitscriteria V3 en V4 van het beoordelingskader.
- • Ankeropgaven zijn lokaal onafhankelijk.
- • In alle ankeropgaven wordt gebruik gemaakt van interpunctie (starten met hoofdletter, eindigen met een punt).
- • Geen sleepvragen of cloze-items.
- • Opgaven waarbij leerlingen gevraagd wordt om zinsdelen of losse woorden aan te klikken worden tot een minimum beperkt, en/of het aan te klikken aantal woorden wordt tot een minimum beperkt.
- • Meerkeuze-opgaven voldoen aan de eisen uit de Checklist voor het beoordelen van de kwaliteit van observatiecategorieën en toetsopgaven (CvTE, 2024).
- • Richtlijnen voor opgaven bij het onderdeel Lezen:
- ○ Altijd twee of meer opgaven per tekst
- ○ Bij voorkeur opgaven van twee of meer taakuitvoeringen per tekst
- • Op basis van pretestgegevens voldoen de ankeropgaven in ieder geval aan de volgende eisen:
- ○ P-waarde is lager dan 0,80 en hoger dan 0,30
- ○ Opgaven hebben een rir groter dan 0,202Het is niet altijd haalbaar om hier precies aan te houden. Hier geldt dat dit een richtlijn is en pragmatisch en weloverwogen een keuze wordt gemaakt.
- • Als de steekproefpopulatie van de pretest sterk afwijkt van de toetspopulatie kan een schatting van de p-waarde en rir gemaakt worden door middel van een simulatie.
- • Binnen een jaarset van een vaardigheidsdomein hebben de opgaven voldoende spreiding in moeilijkheid zodat er betrouwbaar in een breed vaardigheidsgebied gemeten kan worden, en er moet voldoende spreiding in de inhoudelijke kenmerken zitten.
- • Wanneer reeds gepreteste aspirant-ankeropgaven gekozen worden moet bekend zijn hoe vaak en met hoeveel observaties deze opgaven eerder door de toetsaanbieder zijn afgenomen in een pretestsituatie.
- • Labels worden toegekend door de ankerbankbeheerder en dienen eenduidig te zijn en niet veranderd te worden. Deze functioneren alleen ter identificering van de opgave.
- • Er is een eenduidige omschrijving van typering/kenmerken van opgaven, gebaseerd op de toetsmatrijs.
- • Van iedere opgave worden op een terminal server de volgende gegevens bijgehouden:
- ○ De opgave in tekstvorm en eventuele bijbehorende afbeeldingen in hoge resolutie.
- ○ Klassieke psychometrische gegevens zoals bekend uit de pretest.
- • Per afnamejaar worden klassieke psychometrische gegevens en IRT-kenmerken bijgehouden.
- • De ankerbank wordt regelmatig gecontroleerd op actualiteit door de ankerbeheerder in samenspraak met het CvTE, in ogenschouw nemend eventueel voortschrijdend inhoudelijk inzicht of veranderingen in technische mogelijkheden.
- • De jaarset van het anker kan integraal worden opgenomen in een aparte toetsvariant of in deelsets verdeeld zijn over verschillende afnamevarianten. Het is daarbij een vereiste dat de verschillende afnames van het anker ook via een intern anker zijn gekoppeld aan de rest van de afname(varianten) zodat er een verbonden design ontstaat wat op dezelfde schaal gekalibreerd kan worden.
- • Elke ankeropgave wordt voorgelegd aan een steekproef van leerlingen uit het regulier basisonderwijs die representatief is voor de doorstroomtoets. In het geval van de doorstroomtoets po Bonaire is dit gelijk aan de hele populatie.
- • De ankeropgaven zijn zodanig over de toets verspreid dat de positie minimale invloed heeft op de prestatie van de leerlingen op deze opgaven. Concreet betekent dit dat de ankeropgaven bij voorkeur niet helemaal voorin of achterin de toets geplaatst zijn op een bepaalde afnamedag of toetstaak3Zie ook de toelichting van het kwaliteitscriterium T2 in de Regeling beoordelingskader doorstroomtoets po Bonaire..
- • De ankeropgaven vallen qua inhoud en vormgeving niet herkenbaar op tussen de reguliere opgaven in de toets. Ze worden niet in een afwijkend blok afgenomen maar vermengd met reguliere opgaven van hetzelfde vaardigheidsdomein.
- • De ankeropgaven tellen mee in de vaardigheidsschattingen en totaalscores van de leerlingen, tenzij de opgaven na analyse afgekeurd zijn bij de kalibratie zoals omschreven in 2.2.1E.
- • Iedere jaarset van het anker bevat voor ieder te toetsen referentie- en ERK-niveau van ieder verplicht onderdeel 10 opgaven (Papiamentu Lezen, Papiamentu Taalverzorging, Rekenen, NVT Lezen en Luisteren).
- • Binnen ieder terrein bestaat de jaarset uit een gelijke verhouding opgaven van ERK-niveau A2 en B1 (voor Nederlands als vreemde taal) én van referentieniveau 1F en 1S (voor Rekenen). Het terrein Papiamentu wordt vooralsnog alleen op referentieniveau 1F getoetst.
- • Eén bestand met leerlinggegevens.
- • Voor ieder onderdeel een apart bestand met scoringsgegevens.
- • Eén bestand met p-waarden en aantal observaties van de items die opgenomen zijn in de analysedata (ter controle). Itemcodes dienen uniek te zijn over onderdelen heen.
- • Zijn alle bestanden aanwezig met de juiste namen en kolommen?
- • Zijn leerlingidentificatiecodes uniek?
- • Zijn items per leerling uniek?
- • Kloppen de p-waarden en aantallen observaties met het controlebestand?
- • Is het design verbonden?
- • Check op correcte leerlingkoppeling door correlatiecoëfficiënten van verschillende onderdelen uit te rekenen. Bij een correlatie lager dan 0,4 koppelt de adviseur terug aan de toetsaanbieder dat er een lage correlatie is geconstateerd, met het verzoek de koppeling op leerlingniveau te controleren. Wanneer de toetsaanbieder aangeeft dat de lage correlatie correct is zal de adviseur de normering uitvoeren op de aangeleverde data.
- • Scheidingsteken ‘;’
- • Teksten zonder aanhalingstekens
- • Decimaalscheidingsteken: komma
- • Eerste regel bevat kolomnamen
- • [YYYYMMDD] = datum aanmaak bestand
- • Selectie: alle leerlingen eindtoets/doorstroomtoets van afgelopen 3 kalenderjaren
- • [Toetssoort] = uit waardelijst ‘Toetssoort’
- • [YYYYMMDD] = datum aanmaak bestand