Кто точнее в прогнозах: итог битвы ChatGPT и экономистов удивил всех
Впервые нейросеть ChatGPT стала участником закрытого конкурса прогнозистов, который организовал экономист Дэвид Сейф. В соревновании приняли участие сто шестьдесят экспертов, среди которых были представители хедж-фондов, профессиональные экономисты и аналитики. По информации Businessinsider, итоговый результат ИИ оказался ровно в центре рейтинга. ChatGPT занял восьмидесятое место.
Нейросеть обработала более тридцати событий из разных сфер. Среди них были вопросы о политике, экономике, спорте и попкультуре. Организаторы отмечали, что искусственный интеллект выполнял вычисления за доли секунды и в отдельных случаях демонстрировал высокую точность. В некоторых задачах он рассчитывал вероятности на основе математической модели, что позволяло давать точные прогнозы по спортивным событиям и ряду фактических вопросов.
Однако высокая скорость не стала преимуществом в общем зачете. Конкурс требовал не только математического подхода, но и способности оценивать неопределенность и учитывать ограниченность данных. Участники получали штрафы за чрезмерную уверенность в неверном прогнозе. По словам организаторов, именно этот фактор стал главным препятствием для ИИ.
Когда были опубликованы реальные результаты событий, выяснилось, что прогнозы людей, основанные на опыте и интуитивных оценках, в ряде случаев оказались точнее. Вопросы, не имевшие достаточного массива данных для анализа, стали для ChatGPT наиболее проблемными.
Эксперты считают, что участие ИИ в подобных соревнованиях открывает новый этап в сравнении человеческой и машинной аналитики. Испытание показало, что искусственный интеллект способен конкурировать с профессионалами, однако преимущества человека в оценке неопределенности по-прежнему остаются значимыми.
Организаторы конкурса планируют включать ИИ в будущие соревнования, чтобы оценить, сможет ли он со временем приблизиться к лидерским позициям.
Ранее "Курсор" писал, что врачи назвали напиток, который стоит пить перед сном, чтобы сжигать жир.
