Как гибрид IDP и VLM экономит миллионы на верификации данных

Гибридный подход IDP и VLM: повышение точности распознавания документов 💡 Content AI представила результаты исследования по повышению точности распознавания документов, используя гибридный подход: системы интеллектуальной обработки (IDP) в связке с визуально-языковыми моделями (VLM). Цель — автоматизировать верификацию, преодолевая ограничения VLM на сложных документах и снижая зависимость от ручного труда. В эксперименте VLM-модели проверяли и корректировали черновики от IDP-системы ContentCapture на российских паспортах и финансовых документах. Тестирование показало значительный рост метрики Pass-Through Rate (PTR): для паспортов без машиночитаемой зоны PTR вырос до 88,7%, для актов КС-2 — до 87%. IDP обеспечивает структурный каркас, VLM фокусируется на точечной коррекции. Исключением стали универсальные корректировочные документы (УКД), где сложная структура привела к снижению эффективности. 💡 В чем бизнес-ценность? Автоматизация верификации документов позволяет крупным компаниям значительно сократить операционные расходы. Экономия на фонде оплаты труда может достигать 14,4 млн рублей в год для потока в 15 000 документов в месяц. Предложены рекомендации по выбору локальных open-source моделей для различных типов документов.