Morgan Stanley совместно с OpenAI разработала решения на базе искусственного интеллекта, которые помогают финансовым консультантам получать быстрые и точные аналитические данные, принимать обоснованные решения и использовать инструменты для эффективного составления сводок, что способствует углублению взаимоотношений с клиентами. Успех проекта опирается на надёжную систему оценки, гарантирующую стабильную и качественную работу ИИ на уровне, которого ожидают специалисты.
Интегрировав GPT‑4 в свои рабочие процессы, подразделение Wealth Management Morgan Stanley значительно улучшило доступ консультантов к корпоративной базе знаний и повысило скорость реакции на запросы клиентов. Сегодня более 98 % команд консультантов ежедневно пользуются внутренним чат-ботом AI @ Morgan Stanley Assistant, обеспечивая бесперебойный доступ к информации внутри компании.
«Эта технология позволяет вам быть настолько же умными, как самые умные люди в организации. Каждый клиент уникален, и ИИ помогает нам удовлетворить их индивидуальные потребности», – говорит Джефф МакМиллан, руководитель корпоративных ИИ-инициатив Morgan Stanley.
Интегрировав GPT‑4 в свои рабочие процессы, подразделение Wealth Management Morgan Stanley значительно улучшило доступ консультантов к корпоративной базе знаний и повысило скорость реакции на запросы клиентов. Сегодня более 98 % команд консультантов ежедневно пользуются внутренним чат-ботом AI @ Morgan Stanley Assistant, обеспечивая бесперебойный доступ к информации внутри компании.
«Эта технология позволяет вам быть настолько же умными, как самые умные люди в организации. Каждый клиент уникален, и ИИ помогает нам удовлетворить их индивидуальные потребности», – говорит Джефф МакМиллан, руководитель корпоративных ИИ-инициатив Morgan Stanley.
Заложение основы: система оценок для внедрения ИИ
Внедрение ИИ в финансовом секторе требует уверенности, что технологии принесут значительную пользу, соответствуя строгим стандартам качества и надёжности. Morgan Stanley справилась с этой задачей, внедрив систему тестирования (eval framework), которая проверяет каждый ИИ-проект до его развертывания. Эта система измеряет, как модели справляются с реальными задачами, и направляет дальнейшие улучшения на основе экспертной обратной связи.
Начальные цели внедрения ИИ включали:
Для оценки работы GPT‑4 Morgan Stanley проводила тесты по составлению сводок, где специалисты и инженеры оценивали точность и связность ответов, что позволяло корректировать запросы и улучшать качество выдачи. Система оценки постоянно развивается: затем были добавлены тесты перевода для многоязычных клиентов, а совместная работа с OpenAI позволила усовершенствовать методы извлечения данных, обеспечивая обработку всё большего объёма документов.
«Мы перешли от возможности отвечать на 7 000 вопросов к эффективной работе с корпусом из 100 000 документов», – отмечает Дэвид Ву, руководитель стратегии и архитектуры ИИ-продуктов Morgan Stanley.
МакМиллан подчеркивает, что благодаря быстрому и надежному ответу от AI @ Morgan Stanley Assistant консультанты теперь могут обсуждать с клиентами темы, о которых раньше не говорили, ведь разрыв между знанием и коммуникацией исчез.
Внедрение ИИ в финансовом секторе требует уверенности, что технологии принесут значительную пользу, соответствуя строгим стандартам качества и надёжности. Morgan Stanley справилась с этой задачей, внедрив систему тестирования (eval framework), которая проверяет каждый ИИ-проект до его развертывания. Эта система измеряет, как модели справляются с реальными задачами, и направляет дальнейшие улучшения на основе экспертной обратной связи.
Начальные цели внедрения ИИ включали:
- Быстрый поиск информации, чтобы сэкономить консультантам часы на поиске документов.
- Автоматизацию рутинных задач, таких как составление сводок исследовательских отчётов.
- Предоставление глубоких аналитических данных, адаптированных под потребности клиентов.
Для оценки работы GPT‑4 Morgan Stanley проводила тесты по составлению сводок, где специалисты и инженеры оценивали точность и связность ответов, что позволяло корректировать запросы и улучшать качество выдачи. Система оценки постоянно развивается: затем были добавлены тесты перевода для многоязычных клиентов, а совместная работа с OpenAI позволила усовершенствовать методы извлечения данных, обеспечивая обработку всё большего объёма документов.
«Мы перешли от возможности отвечать на 7 000 вопросов к эффективной работе с корпусом из 100 000 документов», – отмечает Дэвид Ву, руководитель стратегии и архитектуры ИИ-продуктов Morgan Stanley.
МакМиллан подчеркивает, что благодаря быстрому и надежному ответу от AI @ Morgan Stanley Assistant консультанты теперь могут обсуждать с клиентами темы, о которых раньше не говорили, ведь разрыв между знанием и коммуникацией исчез.
Масштабирование от пилотного проекта к корпоративному использованию
Основываясь на успехе AI @ Morgan Stanley Assistant, внутреннего чат-бота для ответов на вопросы консультантов, команда запустила инструмент AI @ Morgan Stanley Debrief – систему для создания сводок встреч, работающую на базе технологий Whisper и GPT‑4. Debrief преобразует записи Zoom (с согласия клиентов) в оперативные документы: заметки о встречах интегрируются в CRM, а ключевые задачи оформляются в виде черновиков для последующего уточнения и отправки. При этом консультанты проверяют и корректируют ИИ-выводы, сохраняя баланс между автоматизацией и человеческим контролем.
Оба инструмента получили значительный импульс благодаря eval-подходу Morgan Stanley. Для Debrief команда разработала специальные наборы данных, представляющие разные типы встреч, и провела тщательное тестирование модели, чтобы гарантировать точное выделение ключевых пунктов без ошибок.
«Обратная связь от консультантов была чрезвычайно положительной: они стали более вовлечёнными в работу с клиентами, а задачи, которые раньше занимали дни, теперь решаются в течение часов», – отмечает Кейтлин Эллиотт, руководитель подразделения генеративных ИИ-решений Morgan Stanley.
Основываясь на успехе AI @ Morgan Stanley Assistant, внутреннего чат-бота для ответов на вопросы консультантов, команда запустила инструмент AI @ Morgan Stanley Debrief – систему для создания сводок встреч, работающую на базе технологий Whisper и GPT‑4. Debrief преобразует записи Zoom (с согласия клиентов) в оперативные документы: заметки о встречах интегрируются в CRM, а ключевые задачи оформляются в виде черновиков для последующего уточнения и отправки. При этом консультанты проверяют и корректируют ИИ-выводы, сохраняя баланс между автоматизацией и человеческим контролем.
Оба инструмента получили значительный импульс благодаря eval-подходу Morgan Stanley. Для Debrief команда разработала специальные наборы данных, представляющие разные типы встреч, и провела тщательное тестирование модели, чтобы гарантировать точное выделение ключевых пунктов без ошибок.
«Обратная связь от консультантов была чрезвычайно положительной: они стали более вовлечёнными в работу с клиентами, а задачи, которые раньше занимали дни, теперь решаются в течение часов», – отмечает Кейтлин Эллиотт, руководитель подразделения генеративных ИИ-решений Morgan Stanley.
Повышение доверия за счёт контроля качества
Чтобы соответствовать строгим требованиям финансовой отрасли, Morgan Stanley интегрировала механизмы контроля качества в свою систему оценок. Ежедневное тестирование с использованием набора регрессионных вопросов выявляло потенциальные слабые места и помогало совершенствовать систему, обеспечивая соответствие нормативным требованиям.
«Мы регулярно обсуждаем с OpenAI, что можно изменить в наших методах извлечения данных для достижения необходимой точности», – говорит Эллиотт.
Политика нулевого хранения данных OpenAI также помогла решить ключевые вопросы безопасности, гарантируя конфиденциальность корпоративной информации.
«Один из первых вопросов, который мы слышали, был: не будет ли наша информация использоваться OpenAI для обучения публичного ChatGPT?» – добавляет Дэвид Ву. «Готовность OpenAI обеспечить нулевое хранение данных оказалась крайне важной».
98% внедрения, рост вовлечённости и потенциал новых сервисов
Благодаря вниманию к качеству и надёжности, решения Morgan Stanley пользуются доверием сотрудников:
Сильная система оценок также открыла возможности для будущих решений. AI @ Morgan Stanley становится «суперприложением» для сотрудников, и компания уже масштабирует функционал ассистента для институционального подразделения ценных бумаг.
«Мы создаём платформы, которые будут поддерживать множество других кейсов», – говорит Дэвид Ву. «Если Debrief сегодня предназначен для консультантов, работающих с клиентами, почему бы не адаптировать его для инвестиционных банкиров, общающихся с CFO?»
«Это фундаментальное изменение, которое не только улучшает качество нашего контента, но и создаёт новые продукты и услуги, о которых могут мечтать только те, кто находится в гуще событий», – заключает Джефф МакМиллан.
Чтобы соответствовать строгим требованиям финансовой отрасли, Morgan Stanley интегрировала механизмы контроля качества в свою систему оценок. Ежедневное тестирование с использованием набора регрессионных вопросов выявляло потенциальные слабые места и помогало совершенствовать систему, обеспечивая соответствие нормативным требованиям.
«Мы регулярно обсуждаем с OpenAI, что можно изменить в наших методах извлечения данных для достижения необходимой точности», – говорит Эллиотт.
Политика нулевого хранения данных OpenAI также помогла решить ключевые вопросы безопасности, гарантируя конфиденциальность корпоративной информации.
«Один из первых вопросов, который мы слышали, был: не будет ли наша информация использоваться OpenAI для обучения публичного ChatGPT?» – добавляет Дэвид Ву. «Готовность OpenAI обеспечить нулевое хранение данных оказалась крайне важной».
98% внедрения, рост вовлечённости и потенциал новых сервисов
Благодаря вниманию к качеству и надёжности, решения Morgan Stanley пользуются доверием сотрудников:
- Почти все команды консультантов ежедневно используют инструменты ИИ, что привело к более чем 98%-ому внедрению в подразделении Wealth Management.
- Доступ к документам вырос с 20% до 80%, значительно сократив время поиска.
- Консультанты теперь могут уделять больше времени построению отношений с клиентами благодаря автоматизации рутинных задач и быстрому получению аналитических данных.
Сильная система оценок также открыла возможности для будущих решений. AI @ Morgan Stanley становится «суперприложением» для сотрудников, и компания уже масштабирует функционал ассистента для институционального подразделения ценных бумаг.
«Мы создаём платформы, которые будут поддерживать множество других кейсов», – говорит Дэвид Ву. «Если Debrief сегодня предназначен для консультантов, работающих с клиентами, почему бы не адаптировать его для инвестиционных банкиров, общающихся с CFO?»
«Это фундаментальное изменение, которое не только улучшает качество нашего контента, но и создаёт новые продукты и услуги, о которых могут мечтать только те, кто находится в гуще событий», – заключает Джефф МакМиллан.
