Aussi appelé :
OmniDocBench v1.5 · OmniDocBench benchmark
TermeAvancé
🛠️ Outils et techniques
Mis à jour le
OmniDocBench est un benchmark de référence pour évaluer les systèmes d'extraction de documents, mesurant la qualité de la conversion de PDF en format structuré comme le Markdown.
📖 Définition
OmniDocBench est un banc d'essai standardisé présenté à CVPR 2025, conçu pour évaluer de manière exhaustive les systèmes d'analyse et d'extraction de documents. Développé par le Shanghai AI Laboratory, ce benchmark va au-delà de l'OCR en mesurant la capacité à transformer un PDF brut en un format structuré complet comme le Markdown. Il permet une évaluation standardisée et reproductible de la structuration complète des documents. La version v1.5 (mi-2026) compte 1355 pages et plus de 100 000 annotations fines, couvrant plusieurs catégories de documents (articles académiques, diapositives, livres) avec des annotations de régions, d'éléments et d'ordre de lecture. L'évaluation se fait de bout en bout (PDF vers Markdown) et par module (détection de mise en page, OCR, reconnaissance de tableaux et de formules). Les métriques principales sont Text Edit, TEDS, CDM et Read Order, évaluant respectivement la distance d'édition, la similarité d'arbre pour les tableaux, la précision structurelle pour les formules et la fidélité de l'ordre de lecture.
💬 En termes simples
OmniDocBench est comme un examen complet pour un assistant de bibliothèque, testant sa capacité à lire, comprendre et organiser chaque document parfaitement.
🎯 Exemple concret
Un chercheur utilise OmniDocBench pour comparer des modèles d'IA sur l'extraction de tableaux et de formules dans des articles scientifiques complexes, optimisant son choix pour un projet.
💡 Le saviez-vous ?
OmniDocBench v1.5 contient plus de 100 000 annotations fines sur 1355 pages PDF, couvrant 9 catégories de documents et 3 types de langue.
❓ Questions fréquentes
Pourquoi OmniDocBench est-il important pour l'analyse de documents ?
Il va au-delà de l'OCR simple en évaluant la capacité à structurer un document complet (tableaux, formules, ordre de lecture), ce qui est crucial pour des applications comme la numérisation de livres ou l'analyse de rapports financiers.
Quels types de documents sont inclus dans OmniDocBench ?
Le benchmark couvre 9 catégories : articles académiques, diapositives, livres, examens, notes manuscrites, magazines, rapports financiers et journaux, avec des mises en page variées et plusieurs langues comme l'anglais et le chinois.
Comment est calculé le score global dans OmniDocBench ?
Le score Overall combine trois métriques : la précision du texte extrait (Text Edit), la qualité des tableaux (TEDS) et la précision des formules (CDM), pour donner une note globale de performance.
Reçois chaque semaine le meilleur de l'actualité IA, directement dans ta boîte.
Pas de pourriel, désinscription en 1 clic.
✉️
Restez informé
Recevez nos sélections d'outils et articles directement dans votre boîte courriel.
🔐 Connexion rapide
Entrez votre courriel pour recevoir un code à 6 chiffres.
Pas besoin de mot de passe ni d'inscription. Entrez votre courriel, recevez un code par courriel, et c'est tout !
✓
Paramètres de confidentialité
Nous utilisons des témoins (cookies) pour assurer le bon fonctionnement du site, analyser le trafic et personnaliser le contenu. Vous pouvez gérer vos préférences ci-dessous.
Politique de confidentialité
