Исследование сравнивает GPT-4 с экзаменом на получение сертификата финансового аналитика (CFA).

“Друзья, представляю вам очередной противостояние #GPT4 и экзамена #CFA. Как вы думаете, сможет ли GPT-4 победить в тесте, проверяющем наши знания финансового анализа? Определенно увлекательная битва умов! Кто победит?”

 Исследование сравнивает GPT-4 с экзаменом на получение сертификата финансового аналитика (CFA).

Исследование ставит GPT-4 в сравнение с экзаменом “Chartered Financial Analyst” (CFA)

Исследование, проведенное группой исследователей JPMorgan Chase & Co., показало, что модель GPT-4 компании OpenAI может иметь шансы пройти первый и второй уровни экзамена CFA. Этот сложный экзамен обычно требует четырех лет обучения для людей.

Исследователи отметили: “Основываясь на оценках проходных баллов и средних самооценок, мы пришли к выводу, что ChatGPT, скорее всего, не сможет пройти CFA Level I и Level II при любых проверяемых настройках”.

Однако GPT-4 имеет лучшие шансы, и исследователи утверждают, что “у GPT-4 есть неплохие шансы пройти CFA Level I и Level II, при условии адекватного запроса”.

Исследователи, включая членов исследовательского подразделения AI Research в JPMorgan, Самину Шах и Антоны Пападимитриу, также отметили, что Институт CFA с 2017 года активно внедряет искусственный интеллект и анализ больших данных в свои экзамены.

Крис Виз, директор по образованию в CFA Institute, признал, что хотя крупным языковым моделям (LLM), таким как GPT-4, может быть дан корректный ответ на некоторые вопросы экзамена, получение сертификата CFA требует также значительного практического опыта, рекомендаций, этических стандартов и, вскоре, практических модулей навыков.

Недавно процент прохождения Level I снизился до 37% в августе по сравнению с уже низким средним процентом в 43% в 2018 году.

Исследование показало, что оба моделя ИИ столкнулись с большими трудностями на Level II, независимо от методов запроса.

Однако они успешно справились с заданиями по производным финансовым инструментам, альтернативным инвестициям, корпоративным вопросам, акциям и этике на уровне I. Их результаты были менее удовлетворительными в областях финансовой отчетности и управления портфелем.

ChatGPT столкнулась с трудностями в альтернативных инвестициях и фиксированном доходе на уровне II, в то время как GPT-4 столкнулась больше проблем с управлением портфелем и экономикой.

Ошибки ChatGPT в основном были связаны с недостатком знаний, в то время как у GPT-4 ошибки были в основном связаны с расчетами и логическими ошибками, что иногда приводило к неправильным выводам из-за недостаточной логики.

Это следует за аналогичным недавним исследованием, которое показало ограничения ChatGPT в сфере бухгалтерии. В конце концов, это модель языка.

Как использовать искусственный интеллект в бизнесе

Изучите, как технологии искусственного интеллекта могут преобразить ваш подход к работе. Осмотритесь и выясните, какие процессы можно автоматизировать. Найдите те моменты общения с клиентами, где искусственный интеллект может принести наибольшую пользу.

Определите важные показатели эффективности, чтобы удостовериться, что ваши инвестиции в искусственный интеллект действительно оказывают положительное влияние на бизнес.

Выберите инструменты, которые соответствуют вашим потребностям и позволяют вам настраивать их под свои задачи.

Начните с небольшого проекта, соберите данные о его эффективности, а затем постепенно расширяйте использование искусственного интеллекта в своей работе.

Если вам нужны рекомендации по управлению искусственным интеллектом в бизнесе, свяжитесь с нами по адресу hello@itinai.com. Чтобы быть в курсе последних новостей об искусственном интеллекте, подписывайтесь на наш Telegram-канал t.me/itinairu.

Ознакомьтесь с практическим примером решения на базе искусственного интеллекта: бот для продаж на itinai.ru/aisales, созданный для автоматизации общения с клиентами круглосуточно и управления взаимодействием на всех этапах пути клиента.

Узнайте, как искусственный интеллект может улучшить ваши продажи и общение с клиентами. Познакомьтесь с нашими решениями на сайте itinai.ru

Полезные ссылки: