IT之家从蚂蚁集团获悉，蚂蚁集团自研的百灵大模型的多模态能力全面提升。
多模态能力让大模型能“看”会“听”，能“说”会“画”，可支持音、视、图、文等多模态理解与生成，可以让大模型更像人一样感知和互动，未来将应用在支付宝智能助理、AI 金融管家和 AI 就医助理等多个 AI 智能体。
支付宝智能助理是基于蚂蚁集团自研的百灵大模型研发的一款全新的生活办事 AI 产品，它围绕用户的吃、喝、行、游、办事、买票、娱乐等数十种生活场景，只需要“问一问”，可以获得出行、健康、政务、金融等领域的超 8000 项数字生活服务。
据介绍，“AI 点单”功能目前已在支付宝智能助理开启测试，首批支持星巴克、瑞幸、霸王茶姬、蜜雪冰城等 11 个茶饮品牌的支付宝小程序。
此外，AI 金融管家为用户提供行情分析、持仓诊断等个性化服务，目前已服务 4300 万用户；AI 就医助理则帮助医疗机构为患者提供就医前、中、后全流程服务。
