AgentFAIR: Многоагентная совместная платформа для оценки FAIR-совместимости геопространственных данных
🌍 AgentFAIR: авторы предлагают многоагентную схему для оценки FAIR-совместимости геопространственных наборов данных. Задача практичная: разные инструменты дают заметно расходящиеся оценки, а часть из них плохо работает с JavaScript-страницами и специфическими идентификаторами репозиториев.
Суть исследования: система извлекает структурированные метаданные и передает их 13 LLM-оценщикам по отдельным FAIR-подпринципам. Каждый агент выставляет зрелость от 0 до 3, приводит evidence и рекомендации; отдельный критик проверяет согласованность и может запустить повторную оценку.
Научная новизна — в связке специализированных агентов и критика для более проверяемого аудита качества данных. На 10 повторных прогонах согласие по подпунктам выросло до 89% против 71% без критика. Ограничения существенные: небольшой бенчмарк, неполные ablation-тесты и проверка только на одном семействе моделей.
Первоисточник
Читать оригинал