Что нейросеть уже делает хорошо
Лучше всего ИИ работает там, где много текста и результат легко проверить.
| Задача | Что делает ИИ | Что остаётся юристу |
|---|---|---|
| Поиск по договорам | Отвечает на вопрос и показывает пункт | Оценить, что это значит для компании |
| Реестр договоров | Достаёт стороны, сроки, ставки | Проверить и подтвердить карточку |
| Расхождения | Находит разницу между договором, приложением и допсоглашением | Решить, существенно ли это |
| Черновики | Готовит документ по вашему шаблону | Прочитать и отвечать за текст |
| Проверка закупочной документации | Собирает возможные замечания со ссылками на источник | Принять решение по каждому |
| Подготовка позиции | Подбирает доводы и структуру | Проверить нормы и практику |
Общий принцип мы подробно разбирали в статье как устроен реестр договоров и на странице Flex Документов.
Простые споры стали доступнее
Дела, где раньше проще было заплатить, чем нанимать юриста, теперь можно вести самому: нейросеть помогает подготовить заявления и ходатайства. Это не значит, что можно не проверять: за то, что подано в суд, отвечает тот, кто подал.
Где нейросеть подводит
- 17–33 %ответов с ошибкой или неверной ссылкой у юридических ИИ-систем с поиском по базам, Стэнфорд, 2024 год
- 5 000 $штраф юристам в США за дела, выдуманные ChatGPT, 2023 год
Выдуманные дела. Самый известный случай произошёл в США в 2023 году: юристы подали в суд документ со ссылками на несуществующие дела, придуманные ChatGPT, и получили штраф 5 000 долларов. С тех пор таких случаев стало намного больше.
Даже специальные инструменты ошибаются. В исследовании Стэнфорда 2024 года юридические ИИ-системы LexisNexis и Thomson Reuters с поиском по базам ошибались или ссылались не на то примерно в 17–33 % запросов. Это лучше, чем обычный GPT-4, но далеко от надёжности.
Уверенные, но неверные выводы. В нашем проекте по проверке закупок на настоящих документах нашлось такое:
- Требуется лицензия на отходыТребование появлялось автоматически, без проверки, нужна ли она для этих работ
- ГОСТ отменёнПросто не нашёлся в базе
- Сроки не совпадаютСравнивались разные сроки: услуг и действия контракта
- Адреса не совпадаютПочтовый адрес сравнивался с местом работ
Как устроены такие ошибки и как с ними бороться, мы разобрали в статьях про галлюцинации нейросетей и про ИИ в госуправлении.
Как работать, чтобы не попасть в неприятность
- Только с источникомВывод без ссылки на пункт не считается
- Открыть и прочитатьКаждую норму и каждое дело
- Не передавать лишнегоДоговоры и данные только в согласованный сервис
- Решает юристИ отвечает за документ
Отдельный вопрос — конфиденциальность. Договор с контрагентом, персональные данные сотрудников и адвокатская тайна не должны попадать в публичный зарубежный чат. Для такой работы систему разворачивают на своих серверах или в российском облаке. Но смотреть надо и на то, где работает сама нейросеть: в типовом проекте Flex Документов это внешний сервис. Если документы нельзя выпускать наружу, модели подбирают под вашу инфраструктуру. Подробно в статье про нейросети и персональные данные.
Заменит ли ИИ юристов
Рутинную часть уже забирает: поиск, сверку, черновики, первичный разбор. Мы думаем, что спрос будет смещаться к сильным специалистам, а массовой работы для начинающих станет меньше. То же самое мы видим у разработчиков и дизайнеров, об этом статья какие профессии заменит ИИ.
Но решение, ответственность, разговор с клиентом и выступление в суде остаются за человеком. И заметить ошибку нейросети может только тот, кто сам разбирается в вопросе.
С чего начать в юридическом отделе
- Выберите одну повторяющуюся задачу. Например, поиск условий в архиве договоров.
- Соберите контрольный набор. 20–30 документов с вопросами, на которые вы знаете верный ответ.
- Сравните на нём несколько решений. Смотрите на точность и на то, показывает ли система источник.
- Определите, куда можно передавать данные, ещё до выбора сервиса.
- Закрепите правило. Что можно делать самостоятельно, а что только с проверкой.
