2024年7月5日,支付宝在世界人工智能大会上发布了国内首批多模态医疗大模型,这一突破性成果不仅展示了科技巨头在医疗AI领域的深厚积累,也预示着未来医疗行业的深刻变革。
支付宝发布的多模态医疗大模型是基于蚂蚁集团自研的百灵大模型,该大模型具有原生多模态能力,这意味着它能够直接理解和处理音频、视频、图像以及文本等多种类型的数据。这种能力对于医疗领域尤为重要,因为医疗数据往往是多模态的,包括但不限于病理图片、CT/MRI影像、临床记录、语音报告等。支付宝涉足医疗领域始于对移动支付场景的拓展,随后逐步深入到医疗服务的各个环节。从2014年最初的在线挂号、缴费到医保支付,再到智慧医疗平台的构建,支付宝不断深化医疗健康服务。到2024年的多模态医疗大模型发布,标志着支付宝在医疗AI领域的重大突破,展现了其致力于用科技改善医疗服务的决心和实力。模型的训练数据包括百亿级的中英文图文资料、千亿级的医疗文本语料以及千万级的医疗知识图谱,这有助于提高模型的识别准确率和理解深度。
大模型集成了文本、图像、音频等多种数据处理能力,能够实现以下几个关键功能:智能辅助诊断:通过分析医疗影像资料,如X光片、CT扫描和MRI图像,辅助医生进行疾病识别和初步诊断,提高诊疗效率和准确性。
医疗文献检索与分析:自动提炼和总结医学文献中的关键信息,帮助医生快速获取最新的医疗研究成果。
个性化医疗建议:基于患者的健康档案,提供定制化的健康管理和治疗建议,支持精准医疗实践。
语言翻译与沟通:支持中英文双语的医疗文档翻译,以及与患者之间的无障碍沟通,中英文医疗考试和基准测试达到或超过GPT4水准。尤其在国际医疗交流中发挥重要作用。
支付宝多模态医疗大模型对医疗资源优化配置的正面影响后,也应当注意到,这一变革可能带来的挑战,比如对传统医疗工作岗位的冲击、医疗人工智能伦理问题、以及过度依赖技术可能带来的风险等。
对于未来医学生而言,AI的广泛应用可能会改变他们的学习和就业方向,促使他们掌握更多的跨学科知识,包括人工智能等。一方面,掌握AI、大数据等前沿技术将成为医学生必备的技能,这要求教育体系做出相应调整,培养复合型医疗人才。另一方面,随着AI在医疗决策中的作用日益增强,医学生需要思考如何在人机协作中找到自己的定位,保持医学人文关怀,避免被技术所取代。
![未来每个人都会有自己的家庭医生,支付宝发布国内首批多模态医疗大模型!](http://ai-bots.com.cn/wp-content/themes/onenav/images/t.png)
![未来每个人都会有自己的家庭医生,支付宝发布国内首批多模态医疗大模型!](http://ai-bots.com.cn/wp-content/themes/onenav/images/t.png)