Ученые USC и Prime Intellect представили METAGENE-1: трансформер с 7 миллиардами параметров, обученный на более чем 1.5 триллионах пар оснований ДНК и РНК.

 Researchers from USC and Prime Intellect Released METAGENE-1: A 7B Parameter Autoregressive Transformer Model Trained on Over 1.5T DNA and RNA Base Pairs

“`html

Введение

В условиях постоянных угроз глобальному здоровью, таких как пандемии, необходимость в современных системах бионаблюдения и обнаружения патогенов становится все более очевидной. Традиционные методы геномного анализа часто не справляются с задачами масштабного мониторинга здоровья.

Проблема

Одной из главных проблем является идентификация и понимание геномного разнообразия в таких средах, как сточные воды, содержащие разнообразные микробные и вирусные ДНК и РНК.

Решение: METAGENE-1

Исследователи из Университета Южной Калифорнии, Prime Intellect и Nucleic Acid Observatory представили METAGENE-1 — метагеномную модель. Эта модель с 7 миллиардами параметров предназначена для анализа метагеномных последовательностей.

Ключевые особенности METAGENE-1:

  • Разнообразие данных: Модель обучена на данных, содержащих более 1.5 триллиона пар оснований ДНК и РНК из сточных вод.
  • Стратегия токенизации: Использование токенизации BPE позволяет эффективно обрабатывать новые последовательности нуклеиновых кислот.
  • Инфраструктура обучения: Современные распределенные системы обучения обеспечивают стабильность при работе с большими наборами данных.
  • Применение: METAGENE-1 поддерживает задачи, такие как обнаружение патогенов, обнаружение аномалий и классификация видов.

Результаты и выводы

METAGENE-1 продемонстрировала выдающиеся результаты в различных тестах. В тесте на обнаружение патогенов модель достигла коэффициента корреляции 92.96, значительно превзойдя другие модели.

Заключение

METAGENE-1 представляет собой интеграцию искусственного интеллекта и метагеномики. Модель предлагает практические решения для бионаблюдения и подготовки к пандемиям. Открытый исходный код модели приглашает исследователей к сотрудничеству и инновациям.

Как использовать ИИ в вашем бизнесе

  • Анализируйте, как ИИ может изменить вашу работу.
  • Определите ключевые показатели эффективности (KPI), которые хотите улучшить с помощью ИИ.
  • Выбирайте подходящее решение из множества доступных вариантов ИИ.
  • Внедряйте ИИ постепенно, начиная с небольших проектов.
  • Расширяйте автоматизацию на основе полученных данных и опыта.

Контакты

Если вам нужны советы по внедрению ИИ, пишите нам в Telegram. Следите за новостями о ИИ в нашем Телеграм-канале или в Twitter.

Попробуйте AI Sales Bot, который помогает отвечать на вопросы клиентов и генерировать контент для отдела продаж. Узнайте, как ИИ может изменить ваши процессы с решениями от AI Lab.

“`

Полезные ссылки: