Beheersing van modelrisico

Aangezien besturen van pensioenfondsen vertrouwen op modellen bij hun besluitvorming is het van cruciaal belang dat deze modellen accuraat, consistent en betrouwbaar zijn voor het doel waarvoor deze gebruikt worden. Als Milliman adviseren wij onze klanten niet alleen bij de overgang van het oude naar het nieuwe pensioenstelsel onder de Wet toekomst pensioenen (WTP), maar valideren wij ook de gehanteerde modellen (al dan niet in overleg met de klant, als onafhankelijke actuariële expert). Hiermee worden risico’s die verband houden met het gebruik van deze modellen (tijdig) geïdentificeerd en beheerst.

Type modelvalidatie

Met modelvalidatie wordt in dit kader bedoeld een zorgvuldig doorlopen proces om de betrouwbaarheid en nauwkeurigheid van het betrokken model te beoordelen en vast te leggen. Hierdoor wordt de kans op fout in het model beter beheerst.

In de praktijk zien we vaak dat bij modelvalidatie een onderscheid wordt gemaakt tussen de zogenoemde procesvalidatie en outputvalidatie. Bij procesvalidatie ligt de nadruk op het beoordelen van de processen van het model (bijvoorbeeld beheer, ontwikkeling en implementatie), terwijl bij outputvalidatie de nadruk veelal ligt bij de consistentie en nauwkeurigheid van de uitkomsten van het betrokken model. Het grote verschil is dat procesvalidatie weinig zegt over de uitkomsten van het gehanteerde model.

Aanpak outputvalidatie

Ontdek ook de kracht van onze aanpak outputvalidatie. Door onze internationale ervaring hebben wij een speciale aanpak voor modelvalidatie ontwikkeld. Gecombineerd met onze WTPen actuariële kennis is onze ervaring dat outputvalidatie het beste kan worden gedaan door:

• Een duidelijke scope definiëren waarbij het doel en de het gebruik zijn opgenomen
• Bepalen welke gegevens geschikt zijn om het model te valideren inclusief de invoerdata, invoerparameters, veronderstellingen, uitgangspunten en methode(n)
• Beoordelen van het model op consistentie, accuraatheid en betrouwbaarheid
• Uitvoeren gevoeligheidsanalyses om de robuustheid van het model te testen
• Vastleggen van het valideerproces en de bijbehorende resultaten

De kracht van onze aanpak ligt in de combinatie van onze internationale ervaring, lokale kennis en ons inschattingsvermogen. Daarbij hanteren wij in grote lijnen drie benaderingen, waarbij elke combinatie kan worden toegepast afhankelijk van de situatie. Deze benaderingen zijn:

• Expert intuïtie op basis van kennis en ervaring
• Narekenen van echte modeluitkomsten
• Analyse theoretische met werkelijk resultaten

Het uiteindelijke resultaat wordt vastgelegd en besproken met de opdrachtgever.

Impact gevalideerde modellen

In de praktijk kan de impact van niet-gevalideerde modellen groot zijn. Modelvalidatie wordt steeds meer als cruciaal gezien, ook door DNB.

Als een model niet goed passend is, onnauwkeurig of fouten bevat (en dus onbetrouwbaar is), kan dit leiden tot ongewenste en onzorgvuldige (slechte) besluitvorming, hetgeen kan resulteren in financiële schade voor deelnemers of groepen van deelnemers, reputatieschade voor het pensioenfonds en mogelijk zelfs claims.

Zeker in een tijd waarin er schaarste is aan capaciteit kan een onafhankelijk gevalideerd model van grote waarde zijn. Hierdoor bent u in staat uw klanten te voorzien van berekeningen met een geringere kans op fouten. Uw klanten kunnen met uw gevalideerde modellen een hogere kwaliteit van uw dienstverlening verwachten hetgeen de kwaliteit van hun WTP besluitvorming verbetert en het beslissingsproces kan versnellen.