Что вошло в LOCUS
31 августа в UC Berkeley профессор Diag Davenport представил LOCUS — корпус из 9 239 кодексов американских городов и округов. Совокупный объем материалов составляет примерно семь миллионов страниц. [1 · UC Berkeley Law]
Официальная страница Berkeley Law подтверждает проведение презентации и предмет проекта. Масштаб корпуса позволяет исследовать слой права, который формально открыт, но остается фрагментированным между множеством локальных источников. [1 · UC Berkeley Law]
Локальные кодексы особенно сложны для автоматизированной работы: они отличаются структурой, полнотой архивов и способом публикации. Единый корпус делает возможным систематическое сравнение и воспроизводимую оценку качества моделей. [1 · UC Berkeley Law]
Что измеряет LEXCHEX
LEXCHEX — система сравнительной оценки (benchmark) способности ведущих систем ИИ отвечать на вопросы, опираясь на местные правовые нормы. Здесь оценивается не общая правовая эрудиция модели, а способность найти применимый источник в большом неоднородном массиве. [1 · UC Berkeley Law]
Проект подчеркивает, что опубликованный закон не обязательно является практически наблюдаемым, сопоставимым и пригодным для машинного поиска. Разные форматы, версии и способы публикации затрудняют как работу людей, так и оценку ИИ. [1 · UC Berkeley Law]
Эта система оценки также задает более строгий критерий полезности: система должна не просто сформулировать правдоподобный ответ, а опереться на конкретную применимую норму. Это позволяет отделять уверенный текст от проверяемой правовой работы. [1 · UC Berkeley Law]
Коммерческий слой над открытыми документами
Аналитический вывод выпуска: аналогичная проблема существует во многих фрагментированных областях — инструкциях, гарантийных условиях, сертификатах и регламентах. Простого сбора документов недостаточно; продуктовая ценность возникает после нормализации, ведения версий, фиксации происхождения данных (data provenance) и тестирования ответов. [1 · UC Berkeley Law]
Для доверия к алгоритму важна способность показать применимый источник, его актуальную версию и границу полномочий системы. LOCUS и LEXCHEX дают исследовательскую модель того, как превратить разрозненный публичный массив в корпус, систему оценки и прикладной слой. [1 · UC Berkeley Law]
Следующим важным результатом будут опубликованные оценки конкретных систем и описание ошибок: неверного выбора юрисдикции, устаревшей редакции или отсутствующей ссылки на норму. [1 · UC Berkeley Law]
Источники
- UC Berkeley Law — мероприятие LOCUS / LEXCHEX — Официальная страница мероприятия, 31 августа 2026