出品 | 搜狐健康
作者 | 袁月
编辑 | 周亦川
医院的门诊流程是否合理,关系着医院运转的效率,也是患者就医感受是否好的直接因素之一。
近日,上海市第一人民医院宣布通过支付宝“AI就医助理”解决方案,以大模型、数字人等技术为基础,为患者提供交互陪伴式就医服务,打造上海市首个基于大模型的语音交互的“AI陪诊师-公济小壹”;以及利用AI大模型能力辅助医生生成电子病历,这在全国医疗行业内尚属首次应用。
上海市第一人民医院信息科处长傅春瑜向媒体介绍,传统的智慧就医助手往往需要患者主动搜索,而AI云陪诊师“化被动为主动”,患者每完成一个就诊环节,系统会主动提示患者如何完成下一步操作。当患者打开手机支付宝,向市一医院AI陪诊师提问后,便会收到相关就诊建议和挂号服务推送。在完成挂号后,患者可继续向AI陪诊师询问当前候诊信息,便会收到语音和文字提示“当前您需要就诊,前方候诊X人,当前叫号X号,地址位于几号楼几层哪个区第几诊室……”患者在点击“院内导航”的链接后,通过手机摄像头沿着实景AR的导航路线可最终前往诊室。
从产品侧而言,支付宝是如何践行智能化医院流程再造的呢?
这属于支付宝的“未来医院”计划。蚂蚁集团大模型技术总监陶东杰告诉搜狐健康,这些精细化改造医疗流程产品的背后,是支付宝平台持续面向行业生态的开放,与蚂蚁百灵大模型在医疗领域的探索。目前,基于蚂蚁AI大模型、数字人、安全风控等核心技术,支付宝面向医疗行业开放了“AI就医助理”解决方案,专注提升医院服务效率、病患就诊体验。同时,面向医院开放“生成式电子病例”解决方案,希望成为医生日常的工作助手。
2024年4月,支付宝面向医疗行业开放“AI就医助理”解决方案,利用AI大模型、数字人等技术,助力医疗机构为患者提供覆盖就医前、中、后的“AI陪伴就诊”服务。
解决方案运用到的数字人技术,是“智能亚运”沉淀技术在医疗服务场景运用,背后利用了由支付宝自主研发的“亚运同款”数字人技术打造,包含建模、渲染、驱动、交互等核心能力。值得一提的是,其中的技术关键是支付宝的Web3D互动引擎Galacean,该引擎曾成功帮助杭州亚运会创造了超亿级数字火炬手点燃火炬的吉尼斯纪录,具有国内领先的易用性、便捷性和跨平台性,覆盖市场上97%的智能机型。此前,这项技术还入选了2023年度中国互联网企业创新发展十大典型案例之一。这项技术的普适性,确保了即便是老年机,也能体验到“AI数字人”的陪伴服务,进一步缩小数字鸿沟。
大模型技术的应用,让患者可以直接通过对话的形式,获得关于用药助手、病情咨询、指标解读、科普知识相关的服务,蚂蚁针对医疗领域精调的模型更具专科性、可控性、轻量化的技术优势,与就医全流程的结合,实现从“患者找服务”到“服务找患者”的转变。
“AI就医助理”产生的大量患者行为数据,如何保障数据的脱敏使用?是否会与HIS联通?
在严肃医疗大模型项目中,安全技术具有至关重要的地位。这些模型通常处理大量的个人健康信息,包括敏感的疾病记录、治疗历史和生物识别数据。因此,确保这些信息的安全和隐私是项目成功的关键因素。
HIS系统(Hospital InformationSystem)是医院信息化建设的核心组成部分,它是为了管理和运营医院而设计和开发的一套综合性的信息系统。HIS系统通过整合医院各个部门和业务流程的数据和信息,实现了医院内部的信息共享和协同工作,提高了医疗服务的质量和效率。
HIS系统的目标是提高医院的管理效率、提供优质的医疗服务、实现医院信息化的全面发展。通过HIS系统,医院可以实现信息共享、流程优化、数据分析等功能,提高医疗质量和效率,为医院的发展和患者的健康提供支持。
上海市第一人民医院信息科副处长范骏翔告诉搜狐健康:“为什么我们会跟支付宝合作,因为它是可以做本地化部署的。上周开始,整个ChatGPT应该是对非支持地区已经不允许调用API了。所以,整个大模型的一个使用的一个安全环境,特别是数据安全,是我们整个医疗行业最重要的一个考量。我们第一个是必须支持模型私有化部署,就是我们所有的数据医疗数据是不出院的,这样才能在训练模型的时候确保我们的患者数据安全,这是我们第一个重要的。
然后,我们整体交互,是通过我们院内的HIS,来提升诊前、诊中、诊后的全方位服务体验。
最后把整个入口嵌入到我们的支付宝服务号上,给患者、医生提供服务,我们整个架构是这样的,内外网严格分离。”
陶东杰也回复搜狐健康,支付宝作为这个项目的承建者,我们的角色是两层。第一层,因为这个项目肯定是归属于上海市第一医院,整个项目是基于上海市人民医院的想法和建设来的,所以支付宝第一层角色我们是技术提供方,提供我们的大模型技术,数字人的技术,以及应用开发的技术,帮助医院把这个场景落下来。
第二,同时我们也是一个平台方,提供一个入口,所以大家去使用这个的话,也是在支付宝上去搜上海市第一人民医院,这个医院的小程序在里面去提供。
在这个过程中,所有应用的服务器、数据等等之类的,全部归属于医院和患者,而且存储于医院本地,我们在整个项目建设过程中第一考量因素就是保障数据隐私、合规和安全性,这是我们第一考量因素。
陶东杰还介绍,蚁天鉴是蚂蚁自主技术研发的一站式大模型安全产品和方案平台,结合蚂蚁20年风控实战经验沉淀的金融级安全防控方案,可有效应对医疗垂类大模型应用中的患者数据隐私保护、双向内容风险防控、管理风险和合规性等挑战。
其中,“蚁鉴”针对大模型内部幻觉、算法和软件系统安全、AIGC滥用危害,支持文到文、图到文、文到图等多模态的测评,覆盖数百项大模型内容生成风险(含内容安全、数据安全、隐私合规、科技伦理等风险)+垂类领域专业知识(医疗健康、金融、政务生活等)。
“天鉴”作为用户和大模型之间双向的“盾”,提供多维度安全防控策略体系(拦截、代答、安全大模型、prompt改写),通过首创的安全前置护栏解决方案,结合千万级自建知识库,在医疗领域会重点对医疗通识性问题自动判断,通过对话题、意图的识别,更加精准地杜绝非医疗类问题和风险出现,保障客户大模型业务上线后,生成内容符合医疗垂类的安全和专业,保障业务持续健康运营发展。
此外,鉴于医疗行业有数据隐私、专业知识和系统自主性的需求,考虑到机构的算力成本与便捷部署,百灵大模型还攻坚了轻量化技术。在2023年12月开源的模型轻量化框架(PIA)中,集成了模型剪枝、压缩、量化、推理加速等全链路环节的优化,具备开箱即用、功能无损、低代码接入等优点,可在天级别完成10倍以上压缩比。
基于百灵底座大模型精调而成的医疗模型,使用百亿高质量医疗数据训练生成,模型在多项医疗相关任务中展现出优秀性能,如疾病和药品科普、对话式问诊、多模态报告解读等。
有行业人士感慨,我们丝毫不怀疑支付宝的产品技术研发能力,我们更希望看到支付宝在医疗行业的产品运营推广合作能力,能有不一样的精彩。
据了解,从2014年首次亮相至今,支付宝“未来医院”计划共有三个发展阶段。
第一阶段是帮助医疗机构建立移动医疗服务。支付宝通过开放的移动平台能力、支付及金融解决方案能力及数据能力,联合各类ISV,协同医疗机构打造以患者为中心的智能就医平台,帮助医院实现从挂号、候诊、院内导航、缴费、到取报告、医患互动的全流程移动就医服务,提升患者就医体验;
第二阶段是全面激活医疗全生态服务。结合医疗改革的推进,通过互联网在线完成电子处方、就近药物配送、转诊、医保实时报销、商业保险实时申赔等所有环节,激活整个社会医疗生态;
第三阶段是通过借助前两个阶段的能力,共建基于大数据的健康管理平台。开放的大数据平台结合强大的云计算能力,与可穿戴设备厂商、医疗机构、政府卫生部门等合作,共同搭建基于大数据的健康管理平台,在健康管理方式的创新上,真正帮助用户实现从疾病治疗到疾病预防的转变。
支付宝做了哪些?
医保服务数字化:超半数中国人用支付宝码上就医。支付宝联合各大平台,在北京、上海、广东等地区积极推进医保线上购药,目前,这些地区的参保居民,已经能享受“手机下单买药、医保线上支付、即时配送到家”的便捷服务。
医院服务线上化:连接全国9成三级医院。2023年初,支付宝升级医疗健康频道,通过聚合服务模式,帮助用户便捷发现所需服务,帮助医院、药店、医疗服务平台等机构,高效连接用户。目前,已有超8亿人次将医疗健康添加到支付宝首页。目前,该频道聚合了医保、卫健、医院官方服务超百种、2万余项,在满足用户刚需外,还通过智能引擎,根据用户所需,展示热门服务推荐、本地服务推荐等,在医疗场景中进一步实现“服务找人”,用户可以在频道内获取如眼科、口腔科、体检、疫苗等消费医疗服务。公立医院率先以消费医疗(医美、体检等)为主要服务,在支付宝医疗健康频道展开自运营。公立医院依托于官方小程序,利用支付宝独特的公私域运营模式,使用SaaS化系统工具,全流程借力平台辅助运营,更高效地找到潜在用户,实现健康管理服务的延伸,提升医院阳光收入,为用户提供公立严选好服务。
医疗服务AI化:推动医疗AI服务像扫码支付一样便利。去年以来,支付宝不断在医疗领域建设AI能力,让AI成为更多人而不是少数专业人士才能使用的工具。2023年6月,杭州市医保局联合支付宝推出全国首个AI医保经办助手杭州“医保小智”;2023年11月,浙江卫健委联合支付宝推出全国首个数字健康人“安诊儿”;2024年4月,支付宝开放“安诊儿”背后的“AI就医助理解决方案”,安诊儿服务超百万人次;2024年6月,上海市一医院应用支付宝“AI就医助理解决方案”,推出专属AI陪诊师。
7月5日,在2024世界人工智能大会“可信大模型论坛”上,支付宝公布了其AI技术在医疗领域布局的最新进展:发布多模态医疗大模型,同时,全新推出包括医疗可信一体机、可信云等多款数智化解决方案。现场,支付宝还与人民卫生出版社、北京大学医学部、浙江省卫生健康委等20家机构,联合发起AI医疗共建计划,共同探索AI数智技术底座与创新应用服务。
支付宝副总裁、数字医疗健康事业部总经理张俊杰表示:“支付宝希望用最顶尖的技术做最普惠的服务,让AI像‘扫码支付’一样便利每个人的生活。支付宝也会持续开放AI技术与行业解决方案,携手合作伙伴一起,推动智能医疗走向普惠、普及。”