SelectStar dévoile DAVI, un modèle d'IA dédié au jugement
Selon SelectStar, DAVI atteint 89,2 % d'exactitude face à Jev sur JevBench et réduit d'environ 28 % les coûts d'exécution des modèles via le routage.
SelectStar a annoncé le 26 octobre 2026 la sortie de DAVI, un modèle d'IA spécialisé dans les tâches de jugement, selon digitaltoday.co.kr. L'entreprise de fiabilité et d'évaluation des systèmes d'IA le destine notamment à choisir le modèle approprié selon la difficulté d'une question et à évaluer la pertinence des réponses produites par une IA.
DAVI peut également servir à prédire la probabilité de réussite de la tâche confiée à un agent d'IA.
Sur les 231 questions du benchmark JevBench, DAVI affiche une exactitude de 89,2 %, contre 86,6 % pour Jev, le modèle de jugement de TypeSafeAI. L'écart se creuse sur les problèmes les plus difficiles, avec 77,5 % contre 73,0 %. Sur l'évaluation des retours en coréen, DAVI obtient 72,5 %, contre 66,8 % pour Jev.
Routage et coûts d'exécution
Lors d'une expérience de routage menée sur 870 paires question-réponse coréennes difficiles, le routage fondé sur DAVI a atteint 71,1 % d'exactitude, contre 70,3 % avec Opus seul, l'un des modèles d'Anthropic. Les coûts d'exécution des modèles ont reculé d'environ 28 % par rapport à l'usage d'Opus seul.
SelectStar prévoit d'intégrer DAVI à Datumo Eval, sa plateforme d'évaluation de la fiabilité des systèmes d'IA, en novembre.
En bref
Qu'est-ce que DAVI ?
C'est un modèle d'IA développé par SelectStar et spécialisé dans les tâches de jugement, comme le choix du modèle adapté à une question ou l'évaluation de la pertinence d'une réponse.
Quels résultats DAVI obtient-il face à Jev ?
Sur les 231 questions de JevBench, DAVI atteint 89,2 % d'exactitude contre 86,6 % pour Jev.
Quand DAVI sera-t-il intégré à Datumo Eval ?
SelectStar prévoit de l'appliquer à sa plateforme Datumo Eval en novembre.