Аналітики з Уолл-стріт, які побоюються, що штучний інтелект (ШІ) забере їхні робочі місця, тепер можуть зітхнути з полегшенням.
Згідно з нещодавнім дослідженням, ChatGPT не зміг скласти іспит Chartered Financial Analyst (CFA) – еталонну кваліфікацію для багатьох фінансових фахівців на Уолл-стріт. У дослідженні, проведеному командою дослідників JPMorgan AI та університетських науковців, ChatGPT і GPT-4 поставили запитання, пов'язані з CFA, щоб перевірити, чи здатні вони виконати складні фінансові міркування.
«Ґрунтуючись на передбачуваному показнику успішності та середніх балах, які ми самі повідомили, ми робимо висновок, що ChatGPT може бути не в змозі скласти іспити CFA Level 1 і Level 2 у всіх налаштуваннях тестування», — пишуть дослідники. "
CFA – це суворий тест, що складається з трьох частин, призначений для вимірювання знань з аналізу цінних паперів та управління портфелем. Професіоналам потрібні роки, щоб скласти всі три рівні іспитів, і кандидати часто витрачають сотні годин часу на підготовку. Після сертифікації він вважається знаком відмінності і може надати більше можливостей одержувачу протягом усієї його кар'єри.
Багато людей, які складали іспит, зазнали невдачі. За даними CFA Institute, лише 38% кандидатів, які складали іспит Level 1 у лютому 2023 року, склали іспит. П'ятдесят два відсотки склали іспит 2-го рівня у травні. Показник успішності останнього іспиту рівня 3 у серпні становив 47 відсотків.
Згідно з дослідженням, ChatGPT припустився низки «помилок, заснованих на знаннях», коли його запитали про змодельовані запитання рівня 1, які включали велику кількість запитань із кількома варіантами відповідей, які дослідники визначили як «помилки, в яких моделі не вистачає критичних знань, необхідних для відповідей на запитання». GPT-4 робить ті самі помилки, засновані на знаннях, але вони не такі погані, як ChatGPT.
Тести рівня 1 зазвичай складніші, ніж тести рівня 2, але ці моделі показують гірші результати в тестах рівня 2, які вимагають більшого аналізу та інтерпретації інформації про такі речі, як інвестиції в акціонерний капітал та фінансова звітність.
Загалом GPT-4 перевершує ChatGPT на обох рівнях. Насправді, якщо підказки досить адекватні, він працює досить добре, щоб скласти перші два рівні іспиту CFA. «GPT-4 матиме значні шанси скласти іспити CFA Level 1 і Level 2, якщо буде запропоновано», — пишуть дослідники. "
Звичайно, обробка природної мови, або здатність програмного забезпечення розуміти людську мову і маніпулювати нею, знайшла застосування в декількох областях фінансів, таких як аналіз настроїв або зведена звітність.
Але з розвитком великих мовних моделей штучного інтелекту, таких як ChatGPT, питання про те, що штучний інтелект замінить людей-фінансових фахівців, стало гарячою темою для обговорення на Уолл-стріт. На початку цього року ChatGPT викликав величезний ажіотаж через свою реакцію, схожу на людську.
На щастя, наразі ця ситуація здається далекою від реальності.
Переглянути оригінал
Ця сторінка може містити контент третіх осіб, який надається виключно в інформаційних цілях (не в якості запевнень/гарантій) і не повинен розглядатися як схвалення його поглядів компанією Gate, а також як фінансова або професійна консультація. Див. Застереження для отримання детальної інформації.
Уолл-стріт зітхнула з полегшенням: ChatGPT був недостатньо розумним, щоб бути фінансовим аналітиком!
Джерело: Finance Associated Press
Автор: Хуан Цзюньчжи
Аналітики з Уолл-стріт, які побоюються, що штучний інтелект (ШІ) забере їхні робочі місця, тепер можуть зітхнути з полегшенням.
Згідно з нещодавнім дослідженням, ChatGPT не зміг скласти іспит Chartered Financial Analyst (CFA) – еталонну кваліфікацію для багатьох фінансових фахівців на Уолл-стріт. У дослідженні, проведеному командою дослідників JPMorgan AI та університетських науковців, ChatGPT і GPT-4 поставили запитання, пов'язані з CFA, щоб перевірити, чи здатні вони виконати складні фінансові міркування.
«Ґрунтуючись на передбачуваному показнику успішності та середніх балах, які ми самі повідомили, ми робимо висновок, що ChatGPT може бути не в змозі скласти іспити CFA Level 1 і Level 2 у всіх налаштуваннях тестування», — пишуть дослідники. "
CFA – це суворий тест, що складається з трьох частин, призначений для вимірювання знань з аналізу цінних паперів та управління портфелем. Професіоналам потрібні роки, щоб скласти всі три рівні іспитів, і кандидати часто витрачають сотні годин часу на підготовку. Після сертифікації він вважається знаком відмінності і може надати більше можливостей одержувачу протягом усієї його кар'єри.
Багато людей, які складали іспит, зазнали невдачі. За даними CFA Institute, лише 38% кандидатів, які складали іспит Level 1 у лютому 2023 року, склали іспит. П'ятдесят два відсотки склали іспит 2-го рівня у травні. Показник успішності останнього іспиту рівня 3 у серпні становив 47 відсотків.
Згідно з дослідженням, ChatGPT припустився низки «помилок, заснованих на знаннях», коли його запитали про змодельовані запитання рівня 1, які включали велику кількість запитань із кількома варіантами відповідей, які дослідники визначили як «помилки, в яких моделі не вистачає критичних знань, необхідних для відповідей на запитання». GPT-4 робить ті самі помилки, засновані на знаннях, але вони не такі погані, як ChatGPT.
Тести рівня 1 зазвичай складніші, ніж тести рівня 2, але ці моделі показують гірші результати в тестах рівня 2, які вимагають більшого аналізу та інтерпретації інформації про такі речі, як інвестиції в акціонерний капітал та фінансова звітність.
Загалом GPT-4 перевершує ChatGPT на обох рівнях. Насправді, якщо підказки досить адекватні, він працює досить добре, щоб скласти перші два рівні іспиту CFA. «GPT-4 матиме значні шанси скласти іспити CFA Level 1 і Level 2, якщо буде запропоновано», — пишуть дослідники. "
Звичайно, обробка природної мови, або здатність програмного забезпечення розуміти людську мову і маніпулювати нею, знайшла застосування в декількох областях фінансів, таких як аналіз настроїв або зведена звітність.
Але з розвитком великих мовних моделей штучного інтелекту, таких як ChatGPT, питання про те, що штучний інтелект замінить людей-фінансових фахівців, стало гарячою темою для обговорення на Уолл-стріт. На початку цього року ChatGPT викликав величезний ажіотаж через свою реакцію, схожу на людську.
На щастя, наразі ця ситуація здається далекою від реальності.