CircuChain benchmark onthult fundamentele zwakte in grote taalmodellen bij technische instructies
Nieuws
Onderzoekers hebben met CircuChain een nieuwe AI-benchmark ontwikkeld die laat zien dat krachtige taalmodellen moeite hebben met technische instructies, zelfs wanneer hun berekeningen correct zijn.
De studie richt zich op elektrische circuitanalyse. In dit domein is niet alleen de uitkomst belangrijk, maar ook de methode. Als een model een stroomrichting verkeerd definieert of polariteit omdraait, kan dat in echte systemen tot fouten leiden.
CircuChain test daarom twee aspecten tegelijk:
- Competence: fysisch correct redeneren
- Compliance: expliciete instructies volgen
De resultaten tonen een opvallend patroon. Sterkere modellen behalen bijna perfecte natuurkundige berekeningen, maar negeren vaker opgelegde conventies wanneer die afwijken van standaard aannames. Zwakkere modellen volgen instructies beter, maar maken vaker inhoudelijke fouten.
Relevant voor Nederlandse technische sector
Voor Nederland is dit belangrijk. Technische universiteiten zoals TU Delft en TU Eindhoven experimenteren met AI in engineering-onderwijs. Ook hightechbedrijven gebruiken taalmodellen voor ontwerpdocumentatie en simulaties.
Het onderzoek suggereert dat hogere modelcapaciteit niet automatisch leidt tot betere instructietrouw. Dit raakt direct aan AI alignment. Alignment betekent dat een model zich gedraagt volgens menselijke intenties en regels.
In veiligheidskritische sectoren zoals energie, infrastructuur en halfgeleiderindustrie kan dit verschil cruciaal zijn.
Nieuwe evaluatiekaders nodig
CircuChain introduceert een verificatieproces met symbolische oplossers en SPICE-simulaties. Hiermee onderscheiden onderzoekers vier fouttypen:
- Conventiefouten
- Fysicafouten
- Rekenfouten
- Hallucinaties
De studie onderstreept dat AI-evaluatie verder moet gaan dan benchmark-scores. Vooral in mathematisch rigide domeinen is naleving van instructies essentieel.
Voor beleidsmakers en onderwijsinstellingen betekent dit dat toetsing van AI-systemen specifieker moet worden ingericht. Betrouwbaarheid vraagt om meer dan alleen hoge accuraatheid.
Lees ook
Wessel Simons is redacteur en mede-architect achter AIwereld.nl. Hij schrijft over kunstmatige intelligentie, digitale soevereiniteit, geopolitiek en de machtsverschuivingen die ontstaan door de opkomst van AI-systemen.
Populair nieuws

Zo zoek je op welke algoritmes jouw gemeente gebruikt

Nederlandse chipmaker Axelera wil zware AI in bestaande datacenters laten draaien

Rotterdams AI-lab wint een prijs. Hoeveel invloed krijgen bewoners?

Meer mensen zoeken met AI, ook binnen de zoekmachine van Google

EU vraagt reacties op grondrechtentoets voor risicovolle AI-systemen

VS scherpen regels voor AI-chips aan, ook buiten China
Laatste reacties
- Hi! In de eerste zin van het artikel geven we aan dat het gaat om wat Ouders & Onderwijs vindt. Ik denk ook niet dat die organisatie voor alle ouders spreekt.
RobinHeester10-11-2026 - Ik verbaas mij er over, dat het hier gebracht wordt alsof een onbekende organisatie als "ouders & onderwijs". Namens alle ouders spreekt. Ik als ouder van een dichter op de basisschool en persoonlijk zeer ervaren met AI, ben er op tegen dat AI op de basisschool aanwezig is. Ik deel de mening van deze organisatie dan ook helemaal niet en ondersteun het verbod volledig.wwigman10-11-2026
- Haha! Je bent gelukkig niet de enige hoor. Wel een van de weinige die reageert. :)
RobinHeester30-09-2026 - Toch wel leuk wat je in elkaar hebt gezet🙃 volgens mij ben ik de enige lezer!Cas.v28-09-2026
- Kan inderdaad allebei waar zijn
RobinHeester09-09-2026 - De Chinese AGI is een bedreiging voor de westerse democratie? En een US AGI niet? Er is nauwelijks meer sprake van democratie in de US. Ik vraag me af of het iets uitmaakt waar de eerste AGI het ‘levenslicht’ ziet. Op het moment dat een AGI werkt trekt het zich waarschijnlijk niets aan van locatie en onttrekt het zich aan iedere controle. Hoe een AGI gaat acteren is een filosofische (of Darwinistische?) vraag. Zo lang als een AGI mensen nodig heeft zal ze deze gebruiken, daarna…markvanbijnen09-09-2026
- Wie zijn die experts die dat beweren??Cas.v09-09-2026
- Is volgens X zelf aan de hand https://x.com/GlobalAffairs/status/2093130747796148634
RobinHeester29-08-2026 - Wapeniseert?? Dit is een erg onbetrouwbaar bericht. Niet alleen slecht vertaald, maar ook niet controleerbaar.Cas.v28-08-2026
- Niet mijn observatie dat de toeleveringsaanvoer stabiliseert.Cas.v26-08-2026


