Morgan Stanley utilise des évaluations d'IA pour façonner l'avenir des services financiers

Cette collaboration repose sur un cadre d'évaluation robuste qui garantit que l'IA fonctionne de manière fiable et cohérente, répondant aux normes élevées attendues par les conseillers financiers.

En intégrant GPT-4 dans leurs flux de travail, Morgan Stanley Wealth Management a transformé la manière dont les conseillers financiers accèdent à l'énorme base de connaissances de l'entreprise et répondent aux demandes des clients. Actuellement, plus de 98 % des équipes de conseillers utilisent activement AI @ Morgan Stanley Assistant, un chatbot interne conçu pour répondre aux questions des conseillers financiers, facilitant la récupération d'informations internes sans heurts.

La mise en œuvre de l'IA dans les services financiers nécessitait une solide base de confiance dans la capacité de la technologie à fournir une valeur significative tout en respectant les normes strictes de qualité et de fiabilité de l'entreprise. Pour y remédier, Morgan Stanley a établi un cadre d'évaluation pour évaluer chaque cas d'utilisation de l'IA avant son déploiement. Ces évaluations mesurent la performance du modèle par rapport à des scénarios du monde réel et guident les améliorations continues grâce aux retours d'experts.

Les objectifs initiaux de leurs cas d'utilisation de l'IA comprenaient une récupération d'informations plus rapide pour faire gagner du temps aux conseillers, l'automatisation des tâches répétitives telles que le résumé des rapports de recherche, et des informations améliorées adaptées aux besoins des clients. L'équipe a mené des évaluations de résumé pour évaluer l'efficacité de GPT-4 à condenser de grands volumes de contenu en résumés concis, permettant des ajustements rapides et une amélioration de la qualité des résultats.

Le cadre d'évaluation de Morgan Stanley est dynamique, évoluant à mesure que l'équipe acquiert des connaissances. Ils ont introduit des évaluations de traduction pour les clients multilingues et ont collaboré étroitement avec OpenAI pour affiner les méthodes de récupération, garantissant que l'IA pouvait gérer une bibliothèque de documents en expansion. Cette évolution a considérablement augmenté le nombre de questions auxquelles l'IA peut répondre efficacement, améliorant l'efficacité globale des interactions entre conseillers et clients.

S'appuyant sur le succès d'AI @ Morgan Stanley Assistant, l'équipe a lancé AI @ Morgan Stanley Debrief, un outil de résumé de réunion alimenté par Whisper et GPT-4. Cet outil convertit les enregistrements Zoom en résultats exploitables, tels que des notes pour les clients et des brouillons de suivis, qui sont intégrés sans heurts dans les systèmes CRM. Les conseillers peuvent examiner et ajuster les résultats générés par l'IA, garantissant un équilibre entre automatisation et supervision humaine.

Pour répondre aux normes de conformité rigoureuses des services financiers, Morgan Stanley a intégré l'assurance qualité dans son cadre d'évaluation, effectuant des tests quotidiens pour identifier les faiblesses potentielles. La politique de non-conservation des données d'OpenAI répond également aux préoccupations en matière de sécurité, garantissant la confidentialité des données propriétaires de Morgan Stanley. L'accent mis sur la qualité et la fiabilité a abouti à des solutions de confiance que les employés utilisent activement, avec presque toutes les équipes de conseillers adoptant des outils d'IA quotidiennement, ce qui a conduit à une augmentation de l'engagement et de l'efficacité dans les interactions avec les clients.