SelectStar et Shinhan Bank font admettre K-BankEval à un atelier ICAIF 2026
Le benchmark K-BankEval, co-développé avec Shinhan Bank, évalue 5 000 items dont la sécurité des réponses bancaires, selon SelectStar.
SelectStar a annoncé que son article consacré à K-BankEval, un benchmark d'évaluation des grands modèles de langage (LLM) pour le secteur financier, co-développé avec Shinhan Bank, a été admis à un atelier de l'ICAIF 2026. L'information a été rapportée par datanet.co.kr.
L'article a fait l'objet d'une présentation sous forme de poster lors de l'atelier consacré à la sécurité, à la sûreté et à la confidentialité de l'IA financière, tenu le 15 novembre. L'ICAIF 2026 s'est déroulé sur quatre jours à Milan, en Italie, à partir du 14 novembre.
K-BankEval comprend 5 000 items d'évaluation répartis en six domaines : connaissances financières, RAG, usage d'outils financiers, raisonnement financier, sécurité des réponses et planification de tâches par agent IA. Le benchmark inclut une évaluation de la sécurité des réponses propre aux banques, destinée à refléter la protection des consommateurs de services financiers.
Les travaux examinent notamment si l'IA sélectionne correctement les fonctions externes et ordonne comme il se doit des plans et des outils en plusieurs étapes.
Un contexte académique déjà établi
L'ICAIF, ou ACM International Conference on AI in Finance, est une conférence internationale consacrée à l'IA et à la finance. SelectStar avait déjà vu une étude, FinRED, distinguée lors d'une conférence académique internationale.
En bref
Qu'est-ce que K-BankEval ?
Un benchmark de LLM destiné au secteur financier, co-développé par SelectStar et Shinhan Bank, composé de 5 000 items d'évaluation répartis en six domaines.
Où l'article a-t-il été présenté ?
Lors d'un atelier de l'ICAIF 2026, à Milan, en Italie, sous forme de poster le 15 novembre.