Le système d'Approbation de Modèle transforme le Leaderboard (tableau de bord) d'un outil de comparaison en une interface de gestion de modèles complète, conçue pour soutenir des flux de travail de plus en plus complexes qui peuvent augmenter considérablement le nombre de modèles étiquetés au sein d'un projet.
Approbation d'un modèle
Le système d'approbation permet aux actuaires de désigner des modèles prêts pour la production avec une identification visuelle claire. Pour approuver un modèle, allez dans le Leaderboard et cliquez sur l'icône en forme d'étoile.
Attachez ensuite une étiquette personnalisée et une couleur pour une identification visuelle. L’étiquette apparaît à côté du nom du modèle sur toute la plateforme :
L’étiquette s’affiche également sur la page du projet avec les modèles épinglés.
Approbation au niveau de la branche
L’approbation fonctionne au niveau de la branche, prenant en charge plusieurs modèles approuvés par projet pour des cas d’utilisation tels que des stratégies distinctes par branche, par exemple : variantes de modèles contraintes versus non contraintes, ou configurations champion-challenger avec des étiquettes distinctes comme "Final" et "Challenger".
Les modèles appartenant à la branche de modèles validés sont automatiquement verrouillés pour éviter les modifications accidentelles. Une fois approuvés, les opérations de renommage, de suppression de tags et d'enrichissement sont désactivées, mais la création de branches reste disponible pour soutenir les flux de travail alternatifs.
Amélioration du flux d'importation
Lors de l'importation de modèles dans les modules RISK et RATE, les modèles approuvés apparaissent en haut de la liste de sélection :
La mise en évidence visuelle à travers les étiquettes et les couleurs aide à l'identification rapide des modèles, tandis que l'interface de l'arbre des modèles affiche le statut d'approbation pour réduire le risque d'importer des modèles incorrects.
Le tableau Leaderboard affiche toujours d'abord les modèles approuvés, suivis des modèles épinglés.
Verrouillage de projet
Le verrouillage de projet est une fonctionnalité de gouvernance qui permet aux utilisateurs de geler l'état d'un projet et d'accéder aux mesures de performance des donnée hold-out (retrait). Cela garantit l'intégrité du processus de modélisation en empêchant toute modification supplémentaire des prévisions du modèle.
Depuis la page du projet, les utilisateurs peuvent verrouiller un projet à l'aide du bouton "Lock" (verrouiller).
Tout membre de l'espace de travail peut verrouiller un projet, mais seuls les administrateurs de l'espace de travail ou le propriétaire désigné du projet peuvent le déverrouiller.
Lorsqu'un projet est verrouillé :
Toutes les opérations susceptibles de modifier les prédictions du modèle sont désactivées.
Les opérations de visualisation (mise à l'échelle, regroupement, etc.) restent disponibles.
L'ensemble de données de hold-out (retrait) devient accessible pour l'évaluation des performances, via plusieurs interfaces :
Tableau statistique : une colonne supplémentaire affiche les métriques calculées sur l'ensemble de données de validation
Courbes de Lorenz : les performances de validation peuvent être visualisées et comparées
Comparer les modèles : un sélecteur de données permet de comparer les données de hold-out
Leaderboard (tableau de bord) : les métriques de validation apparaissent dans une colonne supplémentaire pour tous les modèles.
Remarque : seules les mesures de performance sont accessibles sur l'ensemble de données de hold-out. Les graphiques au niveau des observations individuelles (observées par rapport aux prévisions au niveau des lignes) ne sont pas disponibles afin de préserver l'intégrité de l'approche de validation.
Une fois le projet verrouillé, la page du projet affiche :
Date de verrouillage
Informations sur le propriétaire du projet
