Morgan Stanley utiliza avaliações de IA para moldar o futuro dos serviços financeiros

Essa colaboração é baseada em uma robusta estrutura de avaliação que garante que a IA funcione de maneira confiável e consistente, atendendo aos altos padrões esperados pelos consultores financeiros.

Ao integrar o GPT-4 em seus fluxos de trabalho, a Morgan Stanley Wealth Management transformou a forma como os consultores financeiros acessam a vasta base de conhecimento da empresa e respondem às perguntas dos clientes. Atualmente, mais de 98% das equipes de consultores utilizam ativamente o AI @ Morgan Stanley Assistant, um chatbot interno projetado para responder às perguntas dos consultores financeiros, facilitando a recuperação de informações internas de forma fluida.

A implementação de IA nos serviços financeiros exigiu uma base sólida de confiança na capacidade da tecnologia de entregar valor significativo, enquanto adere aos rigorosos padrões de qualidade e confiabilidade da empresa. Para abordar isso, a Morgan Stanley estabeleceu uma estrutura de avaliação para avaliar cada caso de uso de IA antes da implementação. Essas avaliações medem o desempenho do modelo em relação a cenários do mundo real e orientam melhorias contínuas por meio de feedback de especialistas.

Os objetivos iniciais para seus casos de uso de IA incluíam recuperação de informações mais rápida para economizar tempo dos consultores, automação de tarefas repetitivas, como resumir relatórios de pesquisa, e insights aprimorados adaptados às necessidades dos clientes. A equipe conduziu avaliações de resumo para avaliar a eficácia do GPT-4 em condensar grandes volumes de conteúdo em resumos concisos, permitindo refinamentos rápidos e melhoria na qualidade da produção.

A estrutura de avaliação da Morgan Stanley é dinâmica, evoluindo à medida que a equipe ganha insights. Eles introduziram avaliações de tradução para clientes multilíngues e colaboraram de perto com a OpenAI para aprimorar os métodos de recuperação, garantindo que a IA pudesse gerenciar uma biblioteca de documentos em expansão. Essa evolução aumentou significativamente o número de perguntas que a IA pode responder de forma eficaz, melhorando a eficiência geral das interações entre consultores e clientes.

Com base no sucesso do AI @ Morgan Stanley Assistant, a equipe lançou o AI @ Morgan Stanley Debrief, uma ferramenta de resumo de reuniões alimentada pelo Whisper e GPT-4. Esta ferramenta converte gravações do Zoom em saídas acionáveis, como notas de clientes e rascunhos de follow-ups, que são integrados de forma fluida aos sistemas de CRM. Os consultores podem revisar e ajustar as saídas geradas pela IA, garantindo um equilíbrio entre automação e supervisão humana.

Para atender aos rigorosos padrões de conformidade dos serviços financeiros, a Morgan Stanley incorporou garantia de qualidade em sua estrutura de avaliação, realizando testes diários para identificar possíveis fraquezas. A política de retenção de dados zero da OpenAI aborda ainda mais as preocupações de segurança, garantindo a confidencialidade dos dados proprietários da Morgan Stanley. O foco na qualidade e confiabilidade resultou em soluções confiáveis que os funcionários utilizam ativamente, com quase todas as equipes de consultores adotando ferramentas de IA diariamente, levando a um aumento no engajamento e eficiência nas interações com os clientes.