Ученые из Университета Иннополис придумали, как сделать обучение искусственного интеллекта значительно быстрее. Секрет в том, чтобы научить нейросеть следить за текстом глазами человека. Как сообщили в пресс-службе вуза, новый метод позволяет ускорить процесс в полтора-два раза.
Специалисты исследовательского центра сосредоточились на улучшении так называемого обучения с подкреплением. Это когда модель получает обратную связь от людей, чтобы лучше понимать, что именно им нужно. Обычно человек просто оценивает ответ ИИ, и это довольно долгий и затратный процесс. Иннополисцы же решили заглянуть в глаза пользователю точнее, использовать данные о том, как именно он читает.
Они предложили новую систему поощрений для нейросети. Теперь ИИ обучают, учитывая, на каких словах в тексте задерживается взгляд человека. Модель анализирует, какие фрагменты сгенерированного ответа привлекли внимание, и получает подсказку не просто «ответ плохой», а «вот это место пользователь перечитывал дважды, значит, тут что-то не так».
Руководитель лаборатории искусственного интеллекта в медицине Илья Першин объяснил, что такой подход дает очень плотную и точную обратную связь. По его словам, это все равно что учитель укажет на конкретные ошибки в диктанте, а не просто поставит тройку в дневник. Модели не приходится гадать, что именно исправлять, и она быстрее учится выдавать правильные варианты, не тратя силы на бессмысленную правку всего текста целиком.
Ученые уверены, что в будущем это поможет создавать не только более понятные для людей ИИ-помощники, но и делать их гораздо экономичнее. Процесс разработки станет дешевле и быстрее, а сами ассистенты будут точнее понимать, что от них хотят.
