Hoe berekent ELAO de score per kwart niveau nauwkeurig voor universiteiten en professionals?

Als het over taalevaluatie gaat, blijven de meeste tools steken bij globale niveaus: A2, B1, B2. Dat is leesbaar en het is bekend, maar soms is het onvoldoende. Een pedagogisch coördinator die homogene niveaugroepen moet samenstellen, een HR-verantwoordelijke die kandidaten schriftelijk moet vergelijken of een opleidingsinstelling die taalintegratietrajecten aanstuurt: ze hebben allemaal dezelfde behoefte, namelijk een fijne, stabiele en interpreteerbare meting.

Dat is precies wat we met ELAO wilden bouwen. Achter de weergave van een score als B1 (50) of B2 (25) schuilt een rigoureuze mechaniek, bedacht door ons team van pedagogen en gevalideerd met grootschalige data. Zo werkt het, en dit is waarom het de manier waarop u met de resultaten omgaat concreet verandert.

Een score in procenten, omgezet naar niveaus

Het eerste wat u moet begrijpen, is dat wij niet rechtstreeks een ERK-niveau berekenen. Ons algoritme werkt met een interne score uitgedrukt in procenten, op een schaal van 0 tot 100. Pas daarna zet een conversietabel dat resultaat om in een positie op het Europees Referentiekader.

Die aanpak heeft een belangrijk gevolg: ons systeem is niet beperkt tot de standaardindeling van het ERK. Omdat we vertrekken van een continu percentage, kunnen we de conversietabel aanpassen aan om het even welke institutionele schaal. Zo hebben we voor de Alliance française van Atlanta een indeling ontwikkeld met 35 tot 36 subniveaus, met tot acht trappen binnen eenzelfde niveau (B1.1, B1.2, B1.3 … B1.8). Iets wat andere tools eenvoudigweg niet kunnen, omdat ze niet over zo’n granulaire basis beschikken.

In zijn standaardconfiguratie gebruikt onze test vier subtrappen per ERK-niveau, weergegeven met de achtervoegsels 0, 25, 50 en 75. Dat noemen we de score per kwart niveau.

Wat de kwartniveaus concreet betekenen

Het cijfer dat het niveau vergezelt, is niet decoratief. Het geeft aan waar de cursist zich binnen het niveau bevindt, en die informatie is meteen bruikbaar.

Een score van 0 betekent dat het niveau nog maar net behaald is. De cursist voldoet aan de minimumcriteria van het niveau, maar zonder marge. Een score van 25 wijst erop dat het niveau geconsolideerd is: de basis is er en de kandidaat voelt zich comfortabel in de typische situaties van die trap. Een score van 50 plaatst de cursist halverwege tussen zijn huidige niveau en het niveau erboven: hij heeft de helft van de resterende weg afgelegd. Een score van 75 ten slotte geeft aan dat het hogere niveau bijna bereikt is — dat is wat vaak een “sterk niveau” wordt genoemd: een cursist die nog maar wat oefening of blootstelling nodig heeft om de volgende trap te nemen.

Die lezing laat een trainer of opleidingsverantwoordelijke toe om veel genuanceerdere beslissingen te nemen dan met een louter globaal niveau.

Hoe het algoritme die score in realtime opbouwt

De ELAO-test is adaptief. Dat betekent dat de moeilijkheidsgraad van de vragen evolueert op basis van de antwoorden die tijdens de afname worden gegeven. Het systeem volgt geen vast parcours: het put uit een reservoir van meer dan 800 items en selecteert tussen 80 en 121 vragen, afhankelijk van het type ELAO-test (ELAO+, algemeen, business, Screening of Select).

Bij elk antwoord past het algoritme de score in opbouw aan. Is het antwoord correct op een bepaalde moeilijkheidsgraad, dan worden er punten toegevoegd. Is het fout, dan worden er punten afgetrokken. Dat mechanisme van geleidelijk optellen en aftrekken maakt het mogelijk om te convergeren naar een stabiel percentage, dat vervolgens via de referentietabel wordt omgezet in een kwart niveau.

Het is dus geen cijfer aan het einde van een taak: het is een schatting die bij elke vraag preciezer wordt, zoals een thermometer die zijn meting steeds verder verfijnt. Het resultaat: de test kan relatief kort blijven en toch nauwkeurig zijn, omdat er geen overbodige vragen worden gesteld.

De vier modules van de klassieke ELAO-test

De eindscore komt niet uit één enkele dimensie. We evalueren vier afzonderlijke modules, waarvan de synthese het globale resultaat oplevert:

De grammaticale structuren meten het vermogen om de syntaxis correct en natuurlijk te hanteren. De actieve woordenschat evalueert de woorden die de cursist kan inzetten om inhoud te produceren, schriftelijk of mondeling. De passieve woordenschat test de herkenning van woorden in context, dus wat men begrijpt zonder het noodzakelijk zelf te kunnen produceren. De luistervaardigheid ten slotte evalueert het vermogen om gesproken taal te ontcijferen in uiteenlopende situaties.

Die vier dimensies samen geven een veel vollediger beeld dan een traditionele grammaticatest kan bieden. En omdat ze afzonderlijk worden gemeten, maken de gedetailleerde resultaten het ook mogelijk om onevenwichtige profielen op te sporen — een cursist die sterk is in schrijven maar zwak in spreken, bijvoorbeeld — wat de pedagogische keuzes rechtstreeks stuurt.

De ELAO+-test: onze test met een extra module voor spreekvaardigheid

De standaardtest bevat geen mondelinge productie. Dat is een bewuste keuze van onze kant, die ons toelaat een volledig geautomatiseerde, reproduceerbare afname zonder beoordelaarsbias te garanderen. Maar voor contexten waarin het spreken een doorslaggevend criterium is — werving voor communicatiefuncties, toelating tot universitaire richtingen met een sterke relationele dimensie — bieden we een test met een aanvullende module aan: ELAO+.

Die module bootst een interactie na die dicht aanleunt bij wat een kandidaat tegenover een menselijke examinator zou beleven. De vragen worden gesteld door een avatar, wat de ervaring natuurlijker maakt dan een gewone invoerinterface. De opgenomen antwoorden kunnen vervolgens automatisch worden verbeterd door artificiële intelligentie of handmatig worden beoordeeld door een trainer — beide opties zijn beschikbaar, en de audio-opnames blijven altijd toegankelijk, welke modus u ook kiest.

De resultaten van de mondelinge module worden rechtstreeks in het eindrapport geïntegreerd. Zo hoeft u niet tussen verschillende documenten te jongleren en verloopt de besluitvorming vlotter.

Iets wat u zelden ziet: de detectie van niveau A0

De meeste taaltests enten hun schaal op het ERK, dat officieel begint bij A1. Wij gaan een stap verder door een niveau A0 te identificeren, voorbehouden aan absolute beginners die de minimale basis die het Europees kader evalueert nog niet verworven hebben.

Dat detail telt in contexten waarin met zeer heterogene doelgroepen wordt gewerkt — werkzoekende nieuwkomers, industrieel personeel zonder voorafgaande taalopleiding, studenten aan het begin van hun opleiding. Profielen onder A1 negeren betekent dat een deel van de deelnemers een resultaat krijgt dat niets zegt. Ze correct identificeren betekent dat u hun een aangepast vertrekpunt kunt aanbieden — en dat is precies wat wij willen doen.

Hoe universiteiten het kwart niveau gebruiken

Instellingen voor hoger onderwijs hebben rond de score per kwart niveau zeer concrete praktijken ontwikkeld, met name voor het beheer van internationale mobiliteit.

Aan de Université de Caen in Normandië bijvoorbeeld dient de ELAO-score als oriëntatiecriterium voor kandidaturen voor een verblijf in het buitenland. Een student met een score lager dan 50 kan alleen kandideren voor bestemmingen die exact overeenkomen met zijn huidige niveau. Een score gelijk aan of hoger dan 50 opent daarentegen een “tolerantie”: de student mag kandideren voor een bestemming die het onmiddellijk hogere niveau vereist, in de veronderstelling dat hij de zes maanden vóór zijn vertrek zal gebruiken om het resterende halve niveau bij te werken.

Zo’n regel is mogelijk dankzij de fijnheid van de score. Met een binair resultaat B1/B2 is het onmogelijk om een stevige B1 van een fragiele B1 te onderscheiden. Met het kwart niveau wordt de beslissing gedocumenteerd en verdedigbaar.

De betrouwbaarheid van de score: wat de studie met de Forem aantoont

Nauwkeurig meten is goed. Betrouwbaar meten is wat de resultaten geloofwaardig maakt in institutionele of HR-contexten. We hebben onze test laten valideren door een externe studie, uitgevoerd in samenwerking met de Forem, de openbare dienst voor arbeidsbemiddeling en beroepsopleiding van het Waals Gewest in België.

Het protocol was eenvoudig: 18.026 tests werden twee keer afgelegd, één keer op ons platform en één keer via een evaluatie door professionele trainers. Het doel was om het verschil tussen beide resultaten te meten.

De grafiek uit die studie toont dat bij 86 % van de afnames het verschil tussen de ELAO-score en de score toegekend door de trainer kleiner is dan een half niveau. Met andere woorden: in bijna negen op de tien gevallen komen onze geautomatiseerde test en de menselijke beoordelaar tot een zeer vergelijkbare conclusie, zelfs zonder evaluatie van de spreekvaardigheid. Dat is een mate van overeenstemming die ons tot een van de betrouwbaarste tools op de markt maakt.

Die betrouwbaarheid is geen verworvenheid die vaststaat. Samen met onze partner Accent Languages, de opleidingsinstelling die aan de basis ligt van ELAO, nemen we meer dan 1.500 tests per jaar af om de samenhang tussen de menselijke beoordelaars en het platform continu te bewaken. De test is een levend instrument, dat we regelmatig aan de realiteit van het werkveld toetsen.

Wat dit verandert voor HR- en opleidingsprofessionals

Voor een HR-verantwoordelijke biedt een score per kwart niveau iets wat een globaal niveau niet kan geven: de mogelijkheid om kandidaten binnen eenzelfde niveau te vergelijken. Twee profielen die allebei B2 halen, zijn niet gelijkwaardig als de een op B2 (0) zit en de ander op B2 (75). Die nuance kan het verschil maken bij een aanwerving waarbij taal een operationeel criterium is — internationale klantendienst, een functie met contact met buitenlandse partners, het leiden van meertalige teams.

Voor een opleidingsinstelling maakt onze score het mogelijk om werkelijk homogene niveaugroepen samen te stellen, wat met de klassieke ERK-niveaus niet altijd lukt. Een cursist die op B1 (75) staat, heeft niet dezelfde behoeften als een cursist op B1 (0); ze in dezelfde groep zetten remt de enen af en ontmoedigt de anderen.

Voor een universiteit ten slotte vergemakkelijkt de granulariteit van de score zowel de niveaubepaling bij de start van de opleiding als de certificering aan het einde van het traject, met een traceerbaarheid die standhoudt bij internationale academische partners.

Een architectuur bedacht door pedagogen

Wat onze mechaniek onderscheidt van een gewoon scoringalgoritme, is de pedagogische laag die eronder ligt. De omzetting van het percentage naar een kwart niveau gebeurt niet automatisch: het is een expertbeslissing die wij als pedagogen nemen, met precieze kennis van de manier waarop de punten worden berekend en met de keuze van de conversietabel die het best aansluit bij het beoogde referentiekader.

Het is dat interpretatiewerk dat ons toelaat ons aan te passen aan niet-standaardschalen — zoals de 35 subniveaus die voor de Alliance française van Atlanta zijn ontwikkeld — zonder de logica van het ERK geweld aan te doen. Bij ons staat de technologie ten dienste van de pedagogische betekenis, en niet omgekeerd.

Wilt u zien hoe ELAO in uw eigen evaluatieprocessen past, of het nu gaat om universitaire, HR- of beroepsopleidingsbehoeften? Neem hier rechtstreeks contact met ons op om uw context en doelstellingen te bespreken.