Source : Finance Associated Press (en anglais seulement)
Auteur : Huang Junzhi
Les analystes de Wall Street qui craignent que l’intelligence artificielle (IA) ne leur prenne leur emploi peuvent maintenant pousser un soupir de soulagement.
ChatGPT ne réussit pas l’examen Chartered Financial Analyst (CFA) – la qualification de référence pour de nombreux professionnels de la finance à Wall Street, selon une étude récente. Dans l’étude, menée par une équipe de chercheurs en IA de JPMorgan et d’universitaires, ChatGPT et GPT-4 ont été interrogés sur le CFA pour tester s’ils étaient capables d’effectuer un raisonnement financier complexe.
« Sur la base du taux de réussite estimé et des scores moyens autodéclarés, nous concluons que ChatGPT pourrait ne pas être en mesure de passer les examens CFA de niveau 1 et de niveau 2 dans tous les contextes de test », ont écrit les chercheurs. "
Le CFA est un test rigoureux en trois parties conçu pour mesurer les connaissances en matière d’analyse de titres et de gestion de portefeuille. Il faut des années aux professionnels pour terminer les trois niveaux d’examens, et les candidats consacrent souvent des centaines d’heures à la préparation. Une fois certifiée, elle est considérée comme une marque de distinction et peut offrir plus d’opportunités au récipiendaire tout au long de sa carrière.
De nombreuses personnes qui ont passé l’examen ont échoué. Selon le CFA Institute, seuls 38 % des candidats qui ont passé l’examen de niveau 1 en février 2023 ont réussi l’examen. Cinquante-deux pour cent d’entre eux ont réussi l’examen de niveau 2 en mai. Le taux de réussite au dernier examen de niveau 3, en août, était de 47 %.
Selon l’étude, ChatGPT a commis un certain nombre d'"erreurs basées sur les connaissances » lorsqu’on lui a posé des questions simulées de niveau 1 qui impliquaient un grand nombre de questions à choix multiples, que les chercheurs ont définies comme « des erreurs dans lesquelles le modèle manque des connaissances critiques nécessaires pour répondre aux questions ». GPT-4 fait les mêmes erreurs basées sur les connaissances, mais elles ne sont pas aussi graves que ChatGPT.
Les tests de niveau 1 sont généralement plus difficiles que ceux de niveau 2, mais ces modèles sont moins performants dans les tests de niveau 2, qui nécessitent plus d’analyse et d’interprétation de l’information sur des éléments tels que l’investissement en actions et l’information financière.
Dans l’ensemble, GPT-4 surpasse ChatGPT à ces deux niveaux. En fait, si les invites sont suffisamment adéquates, il fonctionne suffisamment bien pour réussir les deux premiers niveaux de l’examen CFA. « GPT-4 aura une chance considérable de réussir les examens CFA de niveau 1 et de niveau 2 s’il y est invité », ont écrit les chercheurs. "
Certes, le traitement du langage naturel, ou la capacité des logiciels à comprendre et à manipuler le langage humain, a trouvé des applications dans plusieurs domaines de la finance, tels que l’analyse des sentiments ou les rapports de synthèse.
Mais avec le développement de grands modèles de langage d’IA tels que ChatGPT, la question du remplacement de l’IA par les professionnels de la finance humaine est devenue un sujet de discussion brûlant à Wall Street. Plus tôt cette année, ChatGPT a fait sensation en raison de sa réponse humaine.
Heureusement, cette situation semble loin d’être une réalité pour le moment.
Voir l'original
Cette page peut inclure du contenu de tiers fourni à des fins d'information uniquement. Gate ne garantit ni l'exactitude ni la validité de ces contenus, n’endosse pas les opinions exprimées, et ne fournit aucun conseil financier ou professionnel à travers ces informations. Voir la section Avertissement pour plus de détails.
Wall Street a poussé un soupir de soulagement : ChatGPT n’était pas assez intelligent pour être analyste financier !
Source : Finance Associated Press (en anglais seulement)
Auteur : Huang Junzhi
Les analystes de Wall Street qui craignent que l’intelligence artificielle (IA) ne leur prenne leur emploi peuvent maintenant pousser un soupir de soulagement.
ChatGPT ne réussit pas l’examen Chartered Financial Analyst (CFA) – la qualification de référence pour de nombreux professionnels de la finance à Wall Street, selon une étude récente. Dans l’étude, menée par une équipe de chercheurs en IA de JPMorgan et d’universitaires, ChatGPT et GPT-4 ont été interrogés sur le CFA pour tester s’ils étaient capables d’effectuer un raisonnement financier complexe.
« Sur la base du taux de réussite estimé et des scores moyens autodéclarés, nous concluons que ChatGPT pourrait ne pas être en mesure de passer les examens CFA de niveau 1 et de niveau 2 dans tous les contextes de test », ont écrit les chercheurs. "
Le CFA est un test rigoureux en trois parties conçu pour mesurer les connaissances en matière d’analyse de titres et de gestion de portefeuille. Il faut des années aux professionnels pour terminer les trois niveaux d’examens, et les candidats consacrent souvent des centaines d’heures à la préparation. Une fois certifiée, elle est considérée comme une marque de distinction et peut offrir plus d’opportunités au récipiendaire tout au long de sa carrière.
De nombreuses personnes qui ont passé l’examen ont échoué. Selon le CFA Institute, seuls 38 % des candidats qui ont passé l’examen de niveau 1 en février 2023 ont réussi l’examen. Cinquante-deux pour cent d’entre eux ont réussi l’examen de niveau 2 en mai. Le taux de réussite au dernier examen de niveau 3, en août, était de 47 %.
Selon l’étude, ChatGPT a commis un certain nombre d'"erreurs basées sur les connaissances » lorsqu’on lui a posé des questions simulées de niveau 1 qui impliquaient un grand nombre de questions à choix multiples, que les chercheurs ont définies comme « des erreurs dans lesquelles le modèle manque des connaissances critiques nécessaires pour répondre aux questions ». GPT-4 fait les mêmes erreurs basées sur les connaissances, mais elles ne sont pas aussi graves que ChatGPT.
Les tests de niveau 1 sont généralement plus difficiles que ceux de niveau 2, mais ces modèles sont moins performants dans les tests de niveau 2, qui nécessitent plus d’analyse et d’interprétation de l’information sur des éléments tels que l’investissement en actions et l’information financière.
Dans l’ensemble, GPT-4 surpasse ChatGPT à ces deux niveaux. En fait, si les invites sont suffisamment adéquates, il fonctionne suffisamment bien pour réussir les deux premiers niveaux de l’examen CFA. « GPT-4 aura une chance considérable de réussir les examens CFA de niveau 1 et de niveau 2 s’il y est invité », ont écrit les chercheurs. "
Certes, le traitement du langage naturel, ou la capacité des logiciels à comprendre et à manipuler le langage humain, a trouvé des applications dans plusieurs domaines de la finance, tels que l’analyse des sentiments ou les rapports de synthèse.
Mais avec le développement de grands modèles de langage d’IA tels que ChatGPT, la question du remplacement de l’IA par les professionnels de la finance humaine est devenue un sujet de discussion brûlant à Wall Street. Plus tôt cette année, ChatGPT a fait sensation en raison de sa réponse humaine.
Heureusement, cette situation semble loin d’être une réalité pour le moment.