Эволюция возможностей больших языковых моделей в юридической сфере: метаанализ четырех экспериментальных исследований
- Авторы: Душкин Р.В.1, Подопригора В.Н.2, Кузьмин А.А.3, Душкин К.Р.4
-
Учреждения:
- Национальный исследовательский ядерный университет «МИФИ»
- Российский экономический университет имени Г.В. Плеханова
- ООО «Экосистемные цифровые решения»
- ООО «А-Я эксперт»
- Выпуск: Том 12, № 3 (2025)
- Страницы: 209-220
- Раздел: БОЛЬШИЕ ЯЗЫКОВЫЕ МОДЕЛИ В ЮРИДИЧЕСКОЙ ПРАКТИКЕ
- URL: https://bakhtiniada.ru/2313-223X/article/view/350202
- DOI: https://doi.org/10.33693/2313-223X-2025-12-3-209-220
- EDN: https://elibrary.ru/CBJQVM
- ID: 350202
Цитировать
Аннотация
Представлен метаанализ четырех экспериментальных исследований проекта «Норм!», направленный на систематическое изучение эффективности больших языковых моделей в юридической сфере. Исследование охватывает сравнительный анализ младших и старших моделей, оптимизацию системных промптов и тестирование многоагентных архитектур на задачах по российскому семейному и гражданскому праву. Ключевым открытием стало выявление нелинейной зависимости между архитектурной сложностью и качеством результатов: переход от простых к сложным системам обеспечивает незначительный прирост качества (15–40%) при экспоненциальном росте ресурсных затрат (в 10–15 раз). Флагманские модели GPT-4.1 и Gemini 2.5 Pro демонстрируют превосходство по качеству (9,04 и 8,52 балла), однако экономически оптимальными остаются младшие БЯМ с коэффициентами эффективности до 130.3. Универсальной проблемной зоной для всех архитектур являются задачи, требующие интегративного анализа множественных правовых норм. Результаты формируют научно обоснованные рекомендации для различных сценариев внедрения: от массовых консультационных сервисов до специализированных юридических применений, определяя перспективы развития гибридных архитектур в правовой практике.
Полный текст
Открыть статью на сайте журналаОб авторах
Роман Викторович Душкин
Национальный исследовательский ядерный университет «МИФИ»
Автор, ответственный за переписку.
Email: drv@aia.expert
ORCID iD: 0000-0003-4789-0736
SPIN-код: 1371-0337
старший преподаватель, кафедра 22 «Кибернетика»
Россия, г. МоскваВладимир Николаевич Подопригора
Российский экономический университет имени Г.В. Плеханова
Email: Podoprigora.VN@rea.ru
ORCID iD: 0000-0001-6485-8135
SPIN-код: 9587-1028
кандидат экономических наук, руководитель лаборатории
Россия, г. МоскваАлексей Алексеевич Кузьмин
ООО «Экосистемные цифровые решения»
Email: a.kuzmin@edisai.tech
генеральный директор
Россия, г. МоскваКирилл Романович Душкин
ООО «А-Я эксперт»
Email: dkr@aia.expert
аналитик
Россия, г. МоскваСписок литературы
- Душкин Р.В. Искусственный интеллект. М.: ДМК-Пресс, 2019. 280 с. ISBN: 978-5-97060-787-9.
- Lai J., Gan W., Wu J. et al. Large language models in law: A survey // AI Open. 2024. URL: https://www.sciencedirect.com/science/article/pii/S2666651024000172 (data of accesses: 13.10.2023).
- Ma S., Chen C., Chu Q. et al. Leveraging large language models for relevance judgments in legal case retrieval // arXiv preprint arXiv:2403.18405. 2024. URL: https://arxiv.org/abs/2403.18405 (data of accesses: 13.10.2023).
- Paul V. Automation in legal: The increasing role of AI // Medium. 2024. URL: https://medium.com/@vincentpaulai/automation-in-legal-the-increasing-role-of-ai-70724ef0b225 (data of accesses: 13.10.2023).
- Magesh V., Surani F., Dahl M. et al. Hallucination-free? Assessing the reliability of leading AI legal research tools // arXiv preprint arXiv:2405.20362. 2024. URL: https://arxiv.org/abs/2405.20362 (data of accesses: 13.10.2023).
- The future of artificial intelligence in the legal industry: Opportunities, challenges, and ethical considerations // Legal Stuff. URL: https://medium.com/@legal.stuff.notion/the-future-of-artificial-intelligence-in-the-legal-industry-opportunities-challenges-and-ethical-61c3198b425a (data of accesses: 13.10.2023).
- Корнеенков А.А., Янов Ю.К., Рязанцев С.В. и др. Метаанализ клинических исследований в оториноларингологии // Вестник оториноларингологии. 2020. Т. 85. № 2. С. 26–30. doi: 10.17116/otorino20208502126.
- Душкин Р.В. Обзор подходов и методов искусственного интеллекта // Радиоэлектронные технологии. 2018. № 3. С. 85–89.
- Румянцев П.О., Саенко У.В., Румянцева У.В. Статистические методы анализа в клинической практике. Ч. 1. Одномерный статистический анализ // Проблемы эндокринологии. 2009. Т. 55. № 5. С. 48–55. doi: 10.14341/probl200955548-55.
- Душкин Р.В. Почему за гибридными ИИ-системами будущее // Экономические стратегии. 2018. № 6 (156). С. 84–93.
Дополнительные файлы






