Как провести пилот ИИ для проверки договоров
Для пилота ИИ возьмите один тип договора и несколько правил проверки. Пусть помощник находит пункты и отклонения, а юрист сверяет их с документом и готовит заключение.
Использование ИИ в договорной работе проще проверить на одном повторяющемся этапе. Например, помощник извлекает сроки оплаты, условия продления и требования к уведомлению из типового договора услуг. Юрист открывает исходный пункт, оценивает отклонение от правил компании и принимает решение. Согласуйте границы пилота с владельцем договорного процесса до передачи документов в систему.
Опишите правила, которые проверяет помощник
Возьмите одну версию внутреннего шаблона и краткую памятку о допустимых отклонениях. Для каждого поля задайте, что извлекать, каким должен быть ответ и когда передать договор человеку сразу. Подготовьте примеры заполнения. Для срока оплаты укажите сумму или этап, число дней, тип дней и событие, от которого ведётся отсчёт. Одна цифра без основания окажется бесполезной при согласовании.
| Поле в карточке проверки | Пример заполнения для учебного договора |
|---|---|
| Версия | Проект от 12 ноября, приложение 2 включено |
| Условие | Оплата остатка через 45 календарных дней после принятия акта |
| Откуда взято | Пункт 4.2, приложение 2, страница 3 |
| Правило сравнения | Стандарт команды составляет 30 календарных дней от принятия акта |
| Результат | Отклонение 15 дней, требуется решение ответственного |
| Что проверить вручную | Пункт об обмене актами и приоритет приложений |
Если нужного документа или приложения нет, помощник должен отмечать отсутствие данных и передавать проверку человеку. Если договор содержит две разные редакции пункта, карточка перечисляет обе ссылки. Приёмлемый ответ допускает неопределённость там, где исходник не позволяет сделать вывод.
Соберите эталонную и контрольную выборки
Для настройки начните с синтетических или разрешённых к использованию документов. Добавьте аккуратный типовой договор, скан со слабым качеством, несколько редакций, отсылку к приложению и документ с противоречивыми условиями. Попросите юристов независимо разметить небольшой набор спорных примеров. Разногласия обсудите до теста, чтобы уточнить правило сравнения, а не подгонять его после результата.
Выделите документы для проверки качества до работы с моделью. Если один шаблон повторяется с небольшими правками, близкие копии стоит отнести к одному набору. Иначе система может хорошо разобрать знакомую редакцию и дать слабый результат при первом чужом шаблоне. Храните версии правила, файла и результата. Сопоставьте ограничения по данным с регламентом использования ИИ. Вначале удобно отключить отправку, согласование и запись результата в рабочую карточку контрагента.
Исследование юридических ИИ-сервисов показало, что ошибки возможны и при работе с поиском по источникам. Авторы изучали юридический поиск. Качество разбора договоров измерьте на документах своего процесса. Исследование надёжности ИИ-сервисов для юристов
Измерьте критические пропуски и время юриста
В учебном тесте юристы отметили 40 критичных условий в договорной выборке. Помощник правильно вынес 35, пять пропустил. Доля найденных критичных пунктов составила 87,5%. Если режим допуска к работе требует находить не менее 95% таких условий на контрольной выборке, это требование пока не выполнено. Отдельно посчитайте лишние предупреждения: они нагружают юриста и затрудняют просмотр результата. Сохраните примеры пропусков с причиной, например отсутствие страницы или неверный разбор ссылки.
Замеряйте полное время юриста от получения файла до подтверждённого заключения. Система за две минуты может подготовить карточку, которую приходится проверять двадцать минут. Сравните это с обычным маршрутом на сопоставимых документах. Для раздельного расчёта времени, качества и затрат пригодится методика оценки пилота ИИ.
Проверьте процесс параллельно обычному согласованию
На первом этапе ведите обычную проверку и тестовый результат рядом. Разбирайте ошибки раз в неделю по типам договора, полям и тяжести. Когда качество стабильно, испытайте помощника на ограниченной очереди, сохранив юридическое утверждение перед любым внешним действием. После смены модели, шаблона или способа оцифровки повторите контрольную выборку.
На мероприятия по ИИ для бизнеса можно взять синтетический договор и собственную карточку требований. Попросите специалистов предложить способ проверить полноту извлечения и связать каждое утверждение с пунктом документа.
Вопросы и ответы
С каким договором начинать? Подойдёт массовый типовой договор с несколькими проверяемыми полями и понятной схемой согласования.
Как оценить вывод «условие отсутствует»? Юрист проверяет полный комплект файлов и подтверждает, что нужного положения действительно нет. Отдельно учитывайте случаи с отсутствующим приложением.
Можно ли сразу применять оценки модели к контрагенту? Решение по договору принимает уполномоченный сотрудник. В пилоте карточка ИИ помогает ему найти сведения и подготовить проверку.
Ближайшие практикумы, вебинары и конференции: сравните программу, дату и условия участия.
Выбрать мероприятие →