BEST-KAG улучшает ответы на вопросы по строительным стандартам
📚 Исследование BEST-KAG рассматривает практическую проблему применения строительных стандартов: поиск по ключевым словам плохо помогает, когда ответ требует связать несколько пунктов, таблицы, схемы и ссылаться на конкретные положения документа.
Авторы предлагают гибридный подход: мультимодальный граф знаний для структуры стандартов и связанных сущностей, конвейер извлечения знаний на правилах и большой языковой модели, а затем генерацию ответа с поиском по графу. База включает 251 стандарт, 171 652 узла и 310 914 связей.
Научная новизна — в связке графовой модели стандартов и генерации ответов с трассировкой до пунктов норм. По оценкам экспертов и метрикам BLEU/ROUGE система обходит несколько базовых LLM, максимум — на 74,01%. Ограничение: работа представлена как arXiv-препринт, а переносимость на другие национальные нормы и языки ещё требует проверки.
Первоисточник
Читать оригинал