Улучшение искусственного интеллекта в области психического здоровья для низкоресурсных сред.

 mhGPT: Advancing Mental Health AI with a Lightweight, Expert Knowledge-Infused Transformer for Low-Resource Environments

“`html

Влияние искусственного интеллекта на улучшение психического здоровья

Психическое здоровье имеет большое значение для качества жизни людей, но доступ к психическим услугам может быть затруднен из-за стигматизации, нехватки специалистов и фрагментированных систем здравоохранения. Тем не менее, NLP продемонстрировал свой потенциал в этой области, создавая модели для выявления симптомов и оценки депрессии по клиническим текстам. Такие модели, как BERT, также адаптированы для классификации психических расстройств.

Решения на практике

Для решения проблем доступа к психическим услугам и создания более эффективных моделей, возможно использовать инновационные методы, такие как mhGPT – легкая генеративная модель, разработанная специально для анализа психического здоровья текстов. Эта модель превосходит более крупные модели, используя лишь 5% набора данных, благодаря интеграции разнообразных данных о психическом здоровье и специальному токенизатору.

Кроме того, существуют модели, такие как MentaLLaMA и MentalBERT, которые также могут быть применены для раннего обнаружения психических расстройств и суицидальных намерений, превосходя общие языковые модели в этой области. Важно отметить, что для улучшения производительности применение методов тонкой настройки, таких как LoRA и QLoRA, играет ключевую роль, особенно в условиях ограниченных ресурсов.

Результаты исследования показали, что mhGPT превзошел сопоставимые модели, такие как MentaLLaMA, MentalBERT и MentalRoBERTa, в различных задачах, несмотря на использование более крупных данных этих моделей. mhGPT также превзошел базовую модель в задаче идентификации именованных сущностей. В целом, mhGPT представляет собой перспективную модель для анализа текстов, связанных с ментальным здоровьем, особенно в условиях ограниченных ресурсов.

Заключение

mhGPT – компактная предварительно обученная трансформерная модель, разработанная специально для анализа текстов, связанных с психическим здоровьем. Эта модель была обучена на социальных медиа и статьях PubMed, а затем успешно подвергнута тонкой настройке на пять конкретных задач, превзойдя новейшие модели, такие как MentaLLaMA, несмотря на меньшее количество параметров и данных обучения. Ключевые инновации включают использование данных, насыщенных экспертными знаниями, специального токенизатора и метода NEFTune для улучшения производительности на несбалансированных наборах данных. Исследование демонстрирует потенциал модели mhGPT для улучшения психического здоровья с помощью искусственного интеллекта, особенно в условиях ограниченных ресурсов.

Посмотреть статью. Вся заслуга за это исследование принадлежит его авторам.

Будьте в курсе наших новостей, следите за нами в Twitter и присоединяйтесь к нашей группе в LinkedIn. Если вам нравится наша работа, вам понравится и наш рассылка.

Не забудьте присоединиться к нашему сообществу Reddit.

Найдите информацию о предстоящих вебинарах по искусственному интеллекту здесь.

Пост

“`

Полезные ссылки: