Le 6 juillet 2026, le Centre de recherche sur l'IA - Université VinUni a officiellement présenté V-Bench. Il s'agit d'un ensemble d'outils à but non lucratif développé pour servir la communauté et promouvoir le développement de l'IA responsable au Vietnam.
Selon VinUni, V-Bench est construit sur un ensemble de données comprenant plus de 40 000 questions et tâches, avec la participation d'un conseil scientifique composé de 18 experts vietnamiens en IA nationaux et étrangers. L'ensemble de données évalue non seulement les connaissances académiques, mais reflète également les facteurs culturels, linguistiques, de souveraineté numérique, de sécurité de l'information et les caractéristiques locales du Vietnam.
L'ensemble d'outils est divisé en deux grandes catégories avec cinq groupes de critères d'évaluation comprenant: la compréhension de la culture implicite, la capacité de gérer la diversité régionale, la sécurité et la souveraineté numériques, la capacité d'application pratique dans des domaines tels que l'éducation et la santé, ainsi que la capacité de planification et d'utilisation des outils des modèles d'IA.
Selon VinUni, V-Bench teste non seulement la capacité de répondre aux questions, mais évalue également le niveau de compréhension culturelle, la langue régionale et la capacité d'action de l'IA dans le contexte vietnamien. Les résultats de l'évaluation sont construits selon une méthodologie unifiée, avec l'évaluation d'un conseil d'experts afin d'assurer l'objectivité et la valeur de référence.
En outre, V-Bench est développé selon les normes courantes dans la recherche sur les grands modèles linguistiques dans le monde, contribuant à la compatibilité avec l'écosystème international de benchmarks, créant des conditions permettant aux développeurs d'IA mondiaux de participer à l'évaluation.
Le professeur Dr Duong Nguyen Vu - vice-recteur, directeur scientifique du Centre de recherche en IA de l'Université VinUni, a déclaré que V-Bench vise à construire un système de référence en IA pour le Vietnam, aidant les agences, les entreprises et les organisations à avoir plus de bases pour choisir des modèles d'IA adaptés à chaque besoin d'utilisation.
Actuellement, l'ensemble d'outils est fourni gratuitement sur vbench.ai et a publié les résultats de l'évaluation de référence pour 15 grands modèles linguistiques.
Dans les temps à venir, VinUni continuera d'élargir V-Bench avec des critères d'évaluation liés à l'image et au son tels que l'identification de l'écriture Nôm, des panneaux régionaux, des graphiques, du patrimoine culturel, l'identification des voix des trois régions, la compréhension du contexte via des vidéos courtes et le traitement de documents vietnamiens d'une longueur de plus de 100 000 tokens tels que des documents juridiques, des contrats et des manuels scolaires.
Selon VinUni, V-Bench est l'un des projets de recherche sur l'IA clés de l'université, visant à contribuer à la communauté de la recherche et à promouvoir le développement de l'IA responsable au Vietnam.
