Datalab выпустила OmniParseBench — открытый OCR-бенчмарк на 16 288 тестов
Datalab представила OmniParseBench — открытый бенчмарк для парсеров документов: 16 288 тестов pass/fail на 2 937 страницах из 2 343 документов на 92 языках. Лидирует Gemini 3.8 Flash с 92,9 балла, собственный парсер Datalab accurate — второй с 92,7. Код и датасет открыты, оценка работает офлайн без API-ключей.
- 16 288 тестов pass/fail на 2 937 страницах из 2 343 документов
- 92 языка, 22 набора тестов, Apache 2.0, оценка офлайн
- Gemini 3.8 Flash — 92,9 балла, Datalab accurate — 92,7
- Топ-3 системы укладываются в 1,3 балла друг от друга
Читать дальше
ИИ