GPT-4 превосходит людей-аналитиков в анализе финансовой отчетности и исследовании претензий

В статье GPT-4 достиг точности 60,31 процента при правильном анализе финансовой отчетности компании.

The исследователи полагают, что GPT и специалисты-аналитики дополняют друг друга

Реклама

GPT-4 может превзойти людей-аналитиков, когда дело доходит до прогнозирования будущего на основе анализа финансовой отчетности, утверждается в новой исследовательской работе. В статье, опубликованной в журнале препринтов, в ходе испытаний было обнаружено, что GPT-4 дает превосходные результаты по сравнению с человеческими аналогами в краткосрочном периоде (от одного до шести месяцев). Он достиг точности своих прогнозов на 60,31 процента по сравнению с 56,7 процента аналитиков-людей. Однако в документе не говорится, что модель ИИ может заменить людей.

Цель исследования

Опубликованная в препринте журнала Social Science Research Network (SSRN), 54-страничная статья под названием «Анализ финансовой отчетности с помощью больших языковых моделей» представляет собой попытку выяснить, какую роль традиционные модели искусственного интеллекта (ИИ) могут играть в анализе финансовой отчетности компании. организации и прогнозирование ее результатов на фондовом рынке в ближайшем будущем.

Такой анализ всегда считался очень сложным, поскольку на результаты деятельности компаний может влиять широкий спектр факторов. Несмотря на то, что некоторые финансовые фирмы используют искусственные нейронные сети (ИНС) для помощи людям в их анализе, большие языковые модели (LLM) для этого не использовались. Исследователи хотели посмотреть, может ли современная (SOTA) LLM, такая как GPT-4, стать ценным дополнением к этому или нет.

Что обнаружила исследовательская работа GPT-4?

Исследователи предоставили анонимную и стандартизированную корпоративную финансовую отчетность GPT-4 (чтобы предотвратить предвзятость, возникающую из-за упоминания названия компании). Затем исследователи использовали два метода для проверки возможностей LLM. Первый заключался в разработке простой подсказки, которая заставляла чат-бота анализировать заявления и прогнозировать будущие доходы. Второй заключался в использовании подсказки «цепочки мыслей» (CoT), которая научила модель ИИ имитировать финансовых аналитиков.

Метод CoT требовал от GPT-4 выявлять заметные тенденции и рассчитывать ключевые финансовые коэффициенты. и сформировать ожидания относительно будущих доходов. Хотя простая подсказка не принесла примечательных результатов, подсказки CoT достигли 60,31 процента, что выше, чем производительность среднего аналитика-человека.

 

«Мы обнаружили, что LLM превосходно справляется с количественными задачами, требующими интуиции и человеческого мышления. Способность выполнять задачи в разных областях указывает на появление общего искусственного интеллекта», — говорится в документе.

• xAI Илона Маска собирает 6 миллиардов долларов в рамках конкурса OpenAI
• Служба контроля конфиденциальности сообщает, что ChatGPT по-прежнему не соответствует стандартам точности данных
• OpenAI Сэма Альтмана подписывает соглашение о контенте с News Corp

Однако исследователи поспешили отметить, что GPT и человеческие аналитики дополняют друг друга, а не первые заменяют вторые. В частности, в документе утверждается, что LLM имеют преимущество в тех областях, где люди склонны проявлять предвзятость и несогласие. Люди аналогичным образом повышают ценность, когда для анализа требуется дополнительная контекстная информация, которая вряд ли будет доступна в финансовых данных.

Является ли Samsung Galaxy Z Flip 5 лучшим складным телефоном, который вы можете купить в Индии прямо сейчас ? Мы обсуждаем новый складной телефон компании в стиле раскладушки в последнем выпуске подкаста Orbital подкаста Gadgets 360. Orbital доступен на Spotify, Gaana, JioSaavn, Google Podcasts, Apple Podcasts, Amazon Music и везде, где вы получаете свои подкасты.
Партнерские ссылки могут создаваться автоматически — подробности см. в нашем этическом заявлении.