Morgan Stanley utiliza evaluaciones de IA para dar forma al futuro de los servicios financieros

Esta colaboración se basa en un robusto marco de evaluación que asegura que la IA funcione de manera confiable y consistente, cumpliendo con los altos estándares esperados por los asesores financieros.

Al integrar GPT-4 en sus flujos de trabajo, Morgan Stanley Wealth Management ha transformado la forma en que los asesores financieros acceden a la extensa base de conocimientos de la firma y responden a las consultas de los clientes. Actualmente, más del 98% de los equipos de asesores utilizan activamente AI @ Morgan Stanley Assistant, un chatbot interno diseñado para responder a las preguntas de los asesores financieros, facilitando la recuperación de información interna sin problemas.

La implementación de la IA en los servicios financieros requirió una sólida base de confianza en la capacidad de la tecnología para ofrecer un valor significativo mientras se adhiere a los estrictos estándares de calidad y confiabilidad de la firma. Para abordar esto, Morgan Stanley estableció un marco de evaluación para evaluar cada caso de uso de IA antes de su implementación. Estas evaluaciones miden el rendimiento del modelo en escenarios del mundo real y guían las mejoras continuas a través de la retroalimentación de expertos.

Los objetivos iniciales para sus casos de uso de IA incluían una recuperación de información más rápida para ahorrar tiempo a los asesores, la automatización de tareas repetitivas como resumir informes de investigación y la mejora de las percepciones adaptadas a las necesidades del cliente. El equipo llevó a cabo evaluaciones de resumen para evaluar la efectividad de GPT-4 en la condensación de grandes volúmenes de contenido en resúmenes concisos, permitiendo refinamientos rápidos y una mejor calidad de salida.

El marco de evaluación de Morgan Stanley es dinámico, evolucionando a medida que el equipo obtiene información. Introdujeron evaluaciones de traducción para clientes multilingües y colaboraron estrechamente con OpenAI para refinar los métodos de recuperación, asegurando que la IA pudiera gestionar una biblioteca de documentos en expansión. Esta evolución ha aumentado significativamente el número de preguntas que la IA puede responder de manera efectiva, mejorando la eficiencia general de las interacciones entre asesores y clientes.

Basándose en el éxito de AI @ Morgan Stanley Assistant, el equipo lanzó AI @ Morgan Stanley Debrief, una herramienta de resumen de reuniones impulsada por Whisper y GPT-4. Esta herramienta convierte grabaciones de Zoom en salidas accionables, como notas de clientes y borradores de seguimientos, que se integran sin problemas en los sistemas CRM. Los asesores pueden revisar y ajustar las salidas generadas por la IA, asegurando un equilibrio entre la automatización y la supervisión humana.

Para cumplir con los rigurosos estándares de cumplimiento de los servicios financieros, Morgan Stanley incorporó aseguramiento de calidad en su marco de evaluación, realizando pruebas diarias para identificar posibles debilidades. La política de retención de datos cero de OpenAI aborda aún más las preocupaciones de seguridad, asegurando la confidencialidad de los datos propietarios de Morgan Stanley. El enfoque en la calidad y la confiabilidad ha dado como resultado soluciones confiables que los empleados utilizan activamente, con casi todos los equipos de asesores adoptando herramientas de IA a diario, lo que lleva a un aumento en el compromiso y la eficiencia en las interacciones con los clientes.