Интересное исследование способностей ИИ-моделей ориентироваться в уголовно-процессуальном законодательстве провел Андрей Стуколов. Для тестирования он выбрал тему разграничения обыска, осмотра места происшествия и оперативно-розыскного мероприятия "обследование помещений, зданий, сооружений, участков местности и транспортных средств". Использовались в том числе языковые модели российских компаний — GigaChat и YandexGPT.

Небольшой спойлер: наиболее эффективно себя показала та модель, которую рекомендую на стримах. На мой взгляд, Андрей подошел наиболее правильно к использованию этих инструментов для получения релевантных ответов. Именно поэтому процент правильных ответов в исследовании так велик.

Обсуждая с Андреем тему языковых моделей для юристов, мы пришли к выводам, что люди, отрицающие влияние новой технологии на работу, имеют завышенные ожидания. Это инструмент, который имеет правила использования. Множество материалов, которые сейчас выходят по языковым моделям для юристов, содержат ошибки, приводящие к выводам, что ИИ не справляется с теми или иными задачами. Поэтому не советую делать выводы из чужих статей, а пробовать самому.