Мина: познакомьтесь с разговорным агентом Google, который лучше других
Это резюме исследования - лишь одно из многих, которые еженедельно распространяются в информационном бюллетене для ученых в области ИИ. Чтобы начать получать еженедельную рассылку, зарегистрируйтесь здесь.
Разговорные агенты, которые представляют собой программы, предназначенные для общения с людьми, стремительно набирают обороты. Многие из них в настоящее время являются узкоспециализированными и обеспечивают высокую производительность, если пользователи не отклоняются слишком далеко от предполагаемого использования. Чтобы они могли обрабатывать широкий спектр разговорных тем и помогать в разработке чат-ботов, которые не являются специализированными, но могут общаться практически о чем угодно, исследование диалога в открытом домене исследует дополнительный подход.
Это интересная исследовательская задача, которая может привести нас к более общему общению с интересными приложениями. У современных чат-ботов есть проблема: они часто не имеют смысла, а иногда непоследовательны из-за отсутствия здравого смысла и реальных знаний. Google выпустил более общего чат-бота, который может общаться в более общем контексте.
Чат-бот Google с искусственным интеллектом, который может болтать о чем угодно
Команда Google Research Brain Team представила Meena, чат-бота на основе искусственного интеллекта, который может вести более разумные и конкретные беседы по сравнению с существующими современными чат-ботами.
Мина имеет 2,6 миллиарда параметров и обучена 341 ГБ текста, отфильтрованному из общедоступных разговоров в социальных сетях. По сравнению с существующей современной генеративной моделью OpenAI GPT-2, Meena имеет в 1,7 раза больше возможностей модели и была обучена на 8,5 раз большем количестве данных. Для улучшений исследователи применили новую метрику оценки человека, которую они предлагают для чат-ботов с открытым доменом, под названием «Разумность и среднее значение специфичности» (SSA), которая фиксирует основные, но важные атрибуты человеческого общения.
Исследователи давно ищут метрику автоматической оценки, которая коррелирует с более точной человеческой оценкой, чтобы ускорить разработку модели диалога. Но это было непросто. Удивительно, но с моделью Meena они обнаруживают, что недоумение, автоматический показатель, легко доступный для любой нейронной модели seq2seq, демонстрирует сильную корреляцию с человеческой оценкой, такой как значение SSA.
Возможное использование и эффекты
Мина получает 10,2 балла за недоумение, что соответствует 72% баллов по SSA. По сравнению с оценками SSA, полученными другими чат-ботами, оценка SSA в 72% - это недалеко от 86% SSA, достигнутого среднестатистическим человеком. Полная версия Meena, которая имеет механизм фильтрации и настроенное декодирование, дополнительно увеличивает оценку SSA до 79%.
С такими захватывающими результатами он говорит вам, что мы все ближе и ближе к участию даже в человеческих беседах с современными ботами. Мина, без сомнения, является увлекательной исследовательской работой, которая может привести ко многим интересным приложениям во взаимодействии человека с компьютером.
Подробнее: На пути к разговорному агенту, который может болтать о ... обо всем
