pov: ты написал магистрерскую и думаешь, что всё позади, а потом приходит OSA 🐝

Собрались как-то раз участники АИСТ, студенты и аспиранты ФТИИ и провели эксперимент...

ㅤ
В ЧЁМ СУТЬ? 👨‍🔬


Прогнали репозитории магистерских ВКР этого года через OSA.Edu — функциональность мультиагентного LLM-инструмента для улучшения научного кода «Оса» из Института ИИ ИТМО.

Смотри подробнее в презентации в комментариях.

              
OSA анализировала текст каждой ВКР и соответствующий репозиторий. Для каждого утверждения из работы искала реализацию в коде и выдавала вердикт — «ЕСТЬ» или «НЕТ», с указанием файла.

ㅤ
ЧТО ПРОВЕРЯЛОСЬ? 🔍
                    
                                       
🗂 оформление репозитория — README, лицензия, структура коммитов, зависимости

🆗 качество кода — синтаксис, докстринги

✏️ воспроизводимость — главное: насколько то, что написано в тексте ВКР, реально подкреплено кодом

Оценки носят ориентировочный характер, так что никаких санкций и снижения отметок не будет — только возможность посмотреть на свою работу со стороны 😊

Отчёты по всем обработанным ВКР доступны на русском и английском тут.

ㅤ
ЭТО РАЗОВАЯ АКЦИЯ? 🤔


Конечно, нет! А рамках ITMO.OpenSource планируем сделать такой авто-анализ учебных и научных работ постоянным и распространить на другие факультеты (а может, даже и университеты).                     

  
Кстати, OSA умеет проверять воспроизводимость не только ВКР, но и научных статей. Если готовитесь к сабмиту и хотите прогнать репозиторий, приходите, поможем!

КОМАНДА 🤝🤝
                                       
🤩Руководитель разработки OSA и OSA.Edu — аспирант и м.н.с. Института ИИ Андрей Гетманов

🤩От лаборатории АИСТ —  Екатерина Ульянова (4 курс), Егор Фёдоров и Александр Шиянов (бакалавры ФТИИ)

🤩Основные участники — Илья Соколов, Данил Ежов (сотрудники NSS Lab), Дана Чернышова и Азат Ахметьянов (магистранты ФТИИ)

Всего у OSA 23 контрибьютора 🐝

Форма обратной связи открыта, всё читаем и учитываем 😉

* Присоединиться к проекту можно в лаборатории АИСТ