“`html
Взаимодействие человека с компьютером (HCI) в мультимодальных разговорах
Взаимодействие человека с компьютером (HCI) значительно улучшило коммуникацию между людьми и компьютерами. Исследователи сосредотачиваются на улучшении различных аспектов, таких как социальный диалог, помощь в написании и мультимодальное взаимодействие, чтобы сделать эти обмены более увлекательными и удовлетворительными. Эти достижения направлены на интеграцию различных перспектив и социальных навыков во взаимодействия, делая их более реалистичными и эффективными.
Инновационные решения в HCI
Одним из основных вызовов в HCI является поддержание долгосрочных персонализированных взаимодействий. Существующие системы часто нуждаются в отслеживании деталей и предпочтений пользователя в течение продолжительного времени, что приводит к отсутствию непрерывности и персонализации. Эта проблема мешает искусственным интеллектом достичь естественного и плавного общения с пользователями. Традиционные наборы данных ограничены односессионными взаимодействиями, что ограничивает их способность захватить непрерывное персонализированное поведение по обмену изображениями, характерное для реальных человеческих разговоров.
Решение от KAIST и KT Corporation
Исследователи из KAIST и KT Corporation представили новую структуру MCU, чтобы решить эти ограничения. Эта структура использует большие языковые модели и инновационный выравниватель изображений для создания долгосрочных мультимодальных диалогов. Они также разработали набор данных STARK, который включает в себя широкий спектр социальных персон и реалистичные временные интервалы. Этот набор данных улучшает персонализацию и непрерывность разговоров путем включения персональных изображений и детальной социальной динамики.
Практическое применение и результаты
Набор данных STARK включает более 0,5 миллиона сессионных диалогов, делая его одним из наиболее полных наборов данных. Он достигает сбалансированного распределения по возрасту, полу и стране, уменьшая риск искажений во время обучения модели. Набор данных в основном содержит разговоры с 2021 по 2024 годы с частыми короткими временными интервалами между сессиями, отражая реальные сценарии непрерывного взаимодействия.
ULTRON 7B, обученная на этом наборе данных, продемонстрировала значительные улучшения в задачах поиска диалога по изображению, подчеркивая эффективность набора данных. Результаты ULTRON 7B подчеркивают способность набора данных улучшать понимание и генерацию соответствующих персонализированных ответов и делать взаимодействия более увлекательными и естественными.
Введение набора данных STARK является значительным прорывом в области HCI. Он предоставляет надежное решение для поддержания долгосрочных персонализированных взаимодействий в системах искусственного интеллекта. Набор данных STARK и модель ULTRON 7B вместе продвигают создание более естественных и увлекательных взаимодействий между человеком и компьютером, демонстрируя потенциал для будущих достижений в этой области.
Подробнее о работе исследователей можно узнать в документе.
Следите за нашими новостями в Twitter, присоединяйтесь к нашему Telegram каналу и группе в LinkedIn.
Если вам нужны советы по внедрению ИИ, пишите нам на Telegram. Следите за новостями о ИИ в нашем Телеграм-канале t.me/itinainews или в Twitter @itinairu45358.
Попробуйте AI Sales Bot. Этот ИИ ассистент в продажах помогает отвечать на вопросы клиентов, генерировать контент для отдела продаж и снижать нагрузку на первую линию.
Узнайте, как ИИ может изменить ваши процессы с решениями от AI Lab itinai.ru. Будущее уже здесь!
Если вам понравилась наша работа, вам понравится и наша рассылка.
Не забудьте присоединиться к нашему 46k+ ML SubReddit.
“`
