支付宝发布多模态医疗大模型 联合20家机构发起医疗AI共建计划
AI医师助手

支付宝发布多模态医疗大模型 联合20家机构发起医疗AI共建计划

转自:中国科技网 科技日报记者 崔爽 7月5日,在2024世界人工智能大会“可信大模型论坛”上,支付宝公布了其AI技术在医疗领域布局的最新进展——发布多模态医疗大模型,同时,全新推出包括医疗可信一体机、可信云等多款数智化解决方案。现场,支付宝还与人民卫生出版社、北京大学医学部、浙江省卫生健康委等20家机构,联合发起AI医疗共建计划,共同探索AI数智技术底座与创新应用服务。 支付宝多模态医疗大模型亮相 经过半年多测试打磨,支付宝医疗大模型正式亮相,这也是国内首批多模态医疗大模型之一。 蚂蚁集团大模型应用部总经理顾进杰介绍了背后的技术研发:蚂蚁百灵大模型已具备能“看”会“听”能“说”会“画”的原生多模态能力,可以直接理解并训练音频、视频、图、文等多模态数据。支付宝医疗大模型以此为基座模型,添加了包含报告、影像、药品等百亿级中英文图文、千亿级医疗文本语料及千万级高质量医疗知识图谱。同时,全栈自研医疗多模态结构,使得模型识别报告、药品、毛发等图像准确率达90%以上,相关技术在行业顶刊与会议 CVPR、KDD、ECCV等发表了多项成果。 为了让回答对话更加可靠,在研发阶段,支付宝还与数百个专业医学团队、专家进行合作标注数据,保障信息权威可信,同时联合上海仁济医院推出首个中文医疗专科问答推理数据集RJUA-QA。模型测试阶段,用户、患者、医生参与问答反馈。 目前,该多模态医疗大模型不仅提供智能问答、病历结构化和检索、辅助诊断,还可识别解读药品及上百种复杂的医学报告,进行毛发健康检测等,这些都能嵌入医院等机构医疗环节全流程。 顾进杰表示,AI的深度应用,不仅对数据、算法、算力提出了更高要求,也对可靠、安全、隐私提出更多挑战,医疗场景下,保障技术可靠与数据隐私安全,至关重要。为此,支付宝面向行业推出“医疗可信一体机+可信云”解决方案,通过密态计算与存储,让医疗数据可用不可见。 据介绍,百灵医疗可信一体机可实现开箱即用,训推一体,支持国产算力,软硬件协同优化加速。医疗大模型可信云方案,通过公有云与专有云部署密态推理,聚焦解决数据隐私安全和商业机密保护问题。 AI医疗创新应用“联盟”来了 去年以来,支付宝持续加速AI技术在医疗领域的开放。去年11月,浙江卫健委应用支付宝开放的“AI就医助理”解决方案,依托大模型、数字人技术,打造了全国首个数字健康人“安诊儿”,为浙江居民提供云陪诊、健康咨询等服务,上线以来,服务了1000多家医疗机构。上海市第一人民医院应用AI大模型,不仅上线了上海首个可语音交互的“数字陪诊师”,还在业内首创了生成式电子病历,将文书工作从原本的10分钟缩减到了15秒。 医疗技术的创新,需要依托平台、产业、学界共同努力。大会现场,支付宝、人民卫生出版社、北京大学医学部、浙江省卫生健康委、厦门市卫生健康委员会、浙江省人民医院等20多家机构、企业,联合发起AI医疗共建计划,共同探索大模型应用及各类专科模型创新研发。 支付宝副总裁、数字医疗健康事业部总经理张俊杰表示,“希望用最顶尖的技术做最普惠的服务”,让AI像“扫码支付”一样便利每个人的生活,同时会持续开放AI技术与行业解决方案,携手合作伙伴一起,推动智能医疗走向普惠、普及。 据了解,自2014年支付宝支持全国第一笔远程挂号缴费以来,经过十年发展,平台已服务超6亿看病就医人群,是国内规模最大的医保第三方在线服务平台、一站式的医疗健康服务平台。目前,全国300多个城市、超过3600家医院在支付宝上提供一站式数字医疗服务。 (主办方供图) 海量资讯、精准解读,尽在新浪财经APP
直击WAIC|百川智能展示AI健康顾问 医疗增强大模型超越GPT-4
AI医师助手

直击WAIC|百川智能展示AI健康顾问 医疗增强大模型超越GPT-4

7月6日消息,近日,2024世界人工智能大会在上海举办。百川智能携Baichuan系列通用大模型、懂搜索的AI助手百小应、内测版医疗应用AI健康顾问以及百川智能ToB解决方案亮相大会现场。 据悉,百川智能在成立之初就将健康作为公司的愿景之一,AI医疗一直是百川智能的重要发展方向。百川智能创始人、CEO王小川早在2021年就曾表示,“往后二十年,若能为生命科学和医学的发展尽一份力,为大众健康做一点贡献,生命就更有意义了。” 百川智能的通用医疗增强大模型不仅在USMLE(美国医考)的评测中超越了GPT-4,并且在由医生(协和、北医等头部三甲高年资主任、主治医师)和心理学专家作为评测主体,对模型进行多角度评测的真实人工评测中,同样超越了GPT-4。 在此基础上,百川智能研发的AI医疗应用——AI健康顾问也首次对外展示,AI健康顾问依托百川智能的通用医疗增强大模型打造,不仅拥有丰富的医药学知识,并且还具备医生思维。它能够像从业多年的全科医生一样,在用户提出问询之后,根据用户的问题持续提问,从更多维度更深入地了解症状,收集到足够多病症信息后再进行综合判断,给出诊断结果和用药建议。 比如,用户问AI健康顾问“我肚子疼,该怎么办?”,收到问题之后,AI健康顾问会相继向用户提出,“是否有呕吐、恶心、腹泻等其他的症状?是否发烧?肚子疼的具体位置?”等多个角度的问题,最后根据用户的回答综合判断病因,给出治疗建议。(定西) 海量资讯、精准解读,尽在新浪财经APP
支付宝联合20家机构发起医疗AI共建计划
AI医师助手

支付宝联合20家机构发起医疗AI共建计划

来源:【人民日报健康客户端】 7月5日,在2024世界人工智能大会“可信大模型论坛”上,支付宝公布了其人工智能(AI)技术在医疗领域布局的最新进展:发布多模态医疗大模型,同时,全新推出包括医疗可信一体机、大模型可信云等多款数智化解决方案。据悉,这也是首批多模态医疗大模型之一。 蚂蚁集团大模型应用部总经理顾进杰介绍,目前,该多模态医疗大模型不仅提供智能问答、病历结构化和检索、辅助诊断,还可识别解读药品及上百种复杂的医学报告,进行毛发健康检测等,这些都能嵌入医院等机构医疗环节全流程。 医疗技术的创新,需要依托平台、产业、学界共同努力。大会现场,支付宝还与人民卫生出版社、北京大学医学部、浙江省卫生健康委等20家机构,联合发起AI医疗共建计划,共同探索AI数智技术底座与创新应用服务。 患者就诊时打开支付宝,跟随“AI陪诊师-公济小壹”指引,完成就诊流程。支付宝供图 2023年以来,支付宝不断创新AI在医疗领域的应用。2023年6月,杭州市医保局联合支付宝推出全国首个AI医保经办助手杭州“医保小智”;2023年11月,浙江卫健委联合支付宝推出全国首个数字健康人“安诊儿”;2024年6月,上海市一医院应用支付宝“AI就医助理解决方案”,推出专属AI陪诊师。 据了解,2014年支付宝支持全国第一笔远程挂号缴费,经过十年发展,平台已服务超6亿看病就医人群。目前,300多个城市、超3600家医院在支付宝上提供一站式数字医疗服务。 责编:陈龙飞 主编:张赫 校对:齐钰 本文来自【人民日报健康客户端】,仅代表作者观点。全国党媒信息公共平台提供信息发布传播服务。 ID:jrtt
人工智能在医疗领域的深度介入是拯救生命的天使还是潜在的风险?
AI医师助手

人工智能在医疗领域的深度介入是拯救生命的天使还是潜在的风险?

在当今科技飞速发展的时代,人工智能(AI)已经逐渐渗透到了医疗领域的各个角落,从疾病诊断到药物研发,从医疗影像分析到患者护理,其影响力日益显著。然而,这种深度介入究竟是为医疗行业带来了前所未有的希望,还是隐藏着未知的风险,成为了一个备受关注且亟待探讨的重要议题。 从积极的方面来看,人工智能无疑是拯救生命的天使。它能够处理和分析海量的医疗数据,其速度和准确性远远超过了人类医生的能力范围。通过深度学习算法,AI 可以在短时间内对医学影像,如 X 光、CT 扫描和 MRI 图像进行精确解读,帮助医生更早期、更准确地发现疾病迹象,尤其是对于那些细微且难以察觉的病变。例如,在癌症的早期筛查中,AI 系统能够检测到极小的肿瘤结节,从而大大提高了患者的治愈率和生存率。 此外,AI 在药物研发方面也展现出了巨大的潜力。传统的药物研发过程漫长且昂贵,成功率较低。而利用人工智能技术,可以对大量的化合物进行快速筛选和模拟,预测其潜在的药效和副作用,显著缩短研发周期,降低研发成本。同时,AI 还能够根据患者的基因特征和病史,为个性化医疗提供精准的治疗方案,最大程度地提高治疗效果,减少不必要的药物副作用。 然而,我们也不能忽视人工智能在医疗领域深度介入所带来的潜在风险。首先,数据质量和隐私问题是一个关键挑战。AI 系统的准确性和可靠性依赖于大量的医疗数据,如果这些数据存在偏差、错误或者不完整,可能会导致诊断和治疗决策的失误。而且,医疗数据涉及患者的个人隐私,如何确保在使用这些数据进行 AI 训练和应用的过程中,严格遵守法律法规,保护患者的隐私安全,是一个亟待解决的问题。 其次,AI 系统的决策过程往往是一个“黑匣子”,即其得出结论的内在逻辑难以被人类完全理解和解释。这在医疗领域可能会引发信任危机,特别是当 AI 给出的诊断或治疗建议与医生的判断不一致时,患者和医生可能会陷入两难的境地。此外,如果过度依赖 AI 系统,可能会削弱医生的临床判断力和经验积累,影响医疗行业的人才培养和发展。 再者,AI 技术在医疗领域的应用还面临着伦理和法律的困境。例如,当 AI 系统出现错误导致医疗事故时,责任的界定和归属问题尚不明确。而且,由于不同地区和医疗机构的医疗水平和资源存在差异,AI 系统的推广和应用可能会进一步加剧医疗资源的不均衡分配。 综上所述,人工智能在医疗领域的深度介入既是拯救生命的天使,也带来了潜在的风险。为了充分发挥其优势,同时最大程度地降低风险,我们需要建立健全相关的法律法规和监管机制,确保数据的质量和隐私安全,提高 AI 系统的透明度和可解释性,加强医生和技术人员的培训和合作,以及促进医疗资源的公平分配。只有这样,我们才能在人工智能的助力下,实现医疗行业的可持续发展,为人类的健康福祉带来更多的希望。
人工智能在医疗领域的应用
AI医师助手

人工智能在医疗领域的应用

人工智能(AI)在医疗领域的应用已经取得了显著进展,从辅助诊断到个性化治疗,AI技术正逐渐成为医疗行业不可或缺的一部分。以下是人工智能在医疗领域的应用、面临的挑战以及未来趋势的详细介绍: 人工智能在医疗领域的应用 ● 辅助诊断:AI算法能够准确分析医学影像和生理数据,帮助医生判断病情并提供更精准的诊断结果。 ● 个性化治疗:结合患者的个体特征和疾病数据,AI提供定制化的治疗方案,实现个性化医疗。 ● 药物研发和临床试验:AI通过分析大量的医学文献和基因组数据,加速新药的研发过程。 ● 手术辅助:AI辅助手术操作,提高手术精确度和安全性,如Da Vinci手术系统。 ● 智能分诊:AI系统能够为首诊患者精准推荐匹配专长医生,提升诊疗效率和患者体验。 面临的挑战 ● 数据隐私和安全问题:保护患者隐私和个人信息安全是AI在医疗领域应用的重要挑战。 ● 算法的透明性与可解释性:确保AI决策过程的透明度和可解释性,增加医生和患者的信任。 ● 监管合规性:制定相关政策和法规,推动医疗数据的共享和隐私保护。 ● 技术难题:解决AI技术在医疗领域的技术难题,提高其准确性和可靠性。 未来趋势 ● 智能化医疗生态系统:AI将与云计算、物联网等技术相结合,构建起智能化的医疗生态系统。 ● 医学研究的进步:AI将推动医学研究的进步,帮助科学家发现更多疾病的机制和治疗方法。 ● 医疗服务的个性化和普惠:通过AI技术,实现医疗服务的个性化和普惠,提高每个人的长期存活率。 ● 医学教育的新模式:AI将在自适应学习、智能教学模式、教育管理等方面有着广泛的应用和发展前景。 人工智能在医疗领域的应用前景广阔,将为人类健康带来更多的机遇和挑战。随着技术的不断进步和问题的逐步解决,AI将在医疗行业中发挥越来越重要的作用。
百川智能AI健康顾问首秀,亮相2024世界人工智能大会
AI医师助手

百川智能AI健康顾问首秀,亮相2024世界人工智能大会

近日,2024世界人工智能大会(WAIC)在上海举办。百川智能携Baichuan系列通用大模型、懂搜索的AI助手百小应、内测版医疗应用AI健康顾问以及百川智能ToB解决方案亮相大会现场,吸引了大量观众到场体验。 AI健康顾问首秀媲美全科医生,医疗增强大模型超越GPT-4 医疗效率和医疗质量的提升,不但与每个人的幸福感、安全感息息相关,更是关乎国计民生,助力整个社会文明进步的大工程。大模型作为新一代革命性技术,有望为医生供给不足,医疗资源配置不均衡,诊疗效率不高等诸多“老大难”问题提供有效解决方案,是医疗领域新质生产力的核心支撑要素之一,在医疗领域拥有广阔发展前景。 百川智能在成立之初就将健康作为公司的愿景之一,AI医疗一直是百川智能的重要发展方向。百川智能创始人、CEO王小川早在 2021 年就曾表示,“往后二十年,若能为生命科学和医学的发展尽一份力,为大众健康做一点贡献,生命就更有意义了。” 秉持助力大众健康事业与生命科学创新发展的理念,百川智能成立以来一直在积极探索AI医疗的技术创新和应用,本次展会上也带来了其通用医疗增强大模型和AI医疗应用的最新突破。百川智能的通用医疗增强大模型不仅在USMLE(美国医考)的评测中超越了GPT-4,并且在由医生(协和、北医等头部三甲高年资主任、主治医师)和心理学专家作为评测主体,对模型进行多角度评测的真实人工评测中,同样超越了GPT-4。 在此基础上,百川智能研发的AI医疗应用——AI健康顾问也首次对外展示,AI健康顾问依托百川智能的通用医疗增强大模型打造,不仅拥有丰富的医药学知识,并且还具备医生思维。它能够像从业多年的全科医生一样,在用户提出问询之后,根据用户的问题持续提问,从更多维度更深入地了解症状,收集到足够多病症信息后再进行综合判断,给出诊断结果和用药建议。比如,用户问AI健康顾问“我肚子疼,该怎么办?”,收到问题之后,AI健康顾问会相继向用户提出,“是否有呕吐、恶心、腹泻等其他的症状?是否发烧?肚子疼的具体位置?”等多个角度的问题,最后根据用户的回答综合判断病因,给出治疗建议。 通用模型研发速度行业领先,首款AI助手“懂搜索、会提问” 展会现场,百川智能展示了其一年多时间里大模型的研发进展。成立以来,百川智能先后发布了Baichuan-7B/13B,Baichuan2-7B/13B四款开源可免费商用大模型,以及 Baichuan2-192K、Baichuan-NPC、Baichuan 4等7款闭源大模型。此外,还与国家级研究机构鹏城实验室共同发布了128K长窗口大模型“鹏城-百川·脑海33B”,模型研发速度领先行业水平。 值得一提的是,作为百川智能发布的最新一代基座大模型,Baichuan 4在国内权威大模型评测机构SuperCLUE的评测中,模型能力行业领先,处于国内大模型第一梯队。并且与国外主流大模型对比,Baichuan 4在知识百科、长文本、生成创作等文科类中文任务上的表现明显优于国外大模型。 除了基础大模型进展,百川智能还向现场观众展示了其成立之后推出的首款AI应用百小应。作为懂搜索、会提问的AI助手,百小应良好地融合了Baichan 4行业领先的通用能力与百川智能前沿的搜索技术,不仅具备多步搜索、智能定向搜索等能力,能够为用户提供更准确、更专业、更有深度的信息,还能够通过一系列提问解决用户无法明确表述自身需求,或者提问过于笼统、抽象等问题,帮助用户明确自身需求,获得更精准的答案。 全新 MaaS+AaaS 解决方案,助力千行百业智能化转型 此外,百川智能还展示了全新的MaaS+AaaS行业解决方案,MaaS服务包含了百川智能最新的旗舰模型Baichuan 4 ,更实惠的Baichuan3-Turbo API和 Baichuan3-Turbo-128K API ,共计三款模型。 AaaS 服务是百川智能在Baichuan 4基础上针对Agent构建推出的Assistants API接口,不仅支持Code interpreter、RAG内建工具,还支持自定义工具调用,方便企业接入各种丰富复杂的API。现在Assistants API处于免费试用阶段,所有感兴趣的企业用户均可申请免费试用。 目前,百川智能已经服务了数千家客户,包括完美世界游戏、爱奇艺、 创梦、什么值得买等各行业的领军企业。未来,百川智能将与更多行业伙伴深入合作,携手共建百川大模型生态。返回搜狐,查看更多 责任编辑:
新质浙商 | 宝藤生物: “AI+”给健康做加法
AI医师助手

新质浙商 | 宝藤生物: “AI+”给健康做加法

“精准医疗致力于在正确的时间给对应的患者予以正确的治疗。正如‘AI+商业’已颠覆传统商业模式,数字科技与医学的融合正在重塑医疗诊断与治疗。”宝藤生物董事长楼敬伟在接受上海证券报记者采访时表示,AI助力下,精准医疗产业正插上腾飞的“翅膀”。 一次性筛查17000多种病原微生物,高效溯源原因不明的感染——在上海宝藤生物医药科技股份有限公司(下称“宝藤生物”)数据中心,研发技术团队每天利用高性能算力和AI算法,处理和分析着海量数据,使复杂的生物信息能够被迅速解析,为医生及患者提供关键的诊断信息。凭借AI科技赋能,使得医疗诊断日益“精准”,让上述场景在临床中得以应用。 深耕精准医疗16年,如今宝藤生物已拥有20余家子公司,是我国精准医学领域的领军企业之一,致力于用先进技术为大众提供优质的精准医学服务。 “精准医疗致力于在正确的时间给对应的患者予以正确的治疗。正如‘AI+商业’已颠覆传统商业模式,数字科技与医学的融合正在重塑医疗诊断与治疗。”宝藤生物董事长楼敬伟在接受上海证券报记者采访时表示,AI助力下,精准医疗产业正插上腾飞的“翅膀”。 “AI+”重塑医疗诊断 前沿技术是宝藤生物的“第一桶金”。 楼敬伟博士毕业于第二军医大学(现海军军医大学),在医院打拼多年后,他瞄准精准医疗赛道,2008年在上海张江创立了宝藤生物。 在楼敬伟看来,精准医疗对辅助临床具有重大意义。在传统医疗场景中,患者往往在服用多次药物后根据临床效果再进行调整。而通过精准医疗技术分析,就能准确知晓某种药物是否对患者有效,避免时间成本及治疗成本的浪费。 随着人工智能技术的发展,精准医疗产业正插上腾飞的“翅膀”。楼敬伟表示,数字科技与医学的融合正在重塑医疗诊断与治疗。凭借AI技术,如今给患者诊断可分为三步:第一步,通过基因测序给患者健康状况进行画像,精准识别疾病;第二步,AI分析患者对哪些药物敏感;第三步,大数据预测该疾病是否会复发,实现早期预防。 “人工智能在处理数据方面优势凸显。AI引擎能够为患者提供个性化的精准医疗方案,这不仅是单一药物的治疗,而是将现有药物进行有效组合,以实现最佳治疗效果。这种技术的应用将极大提高医疗产业的效率。”楼敬伟说。 展望未来,楼敬伟表示,宝藤生物将围绕三方面布局:一是通过与商业伙伴合作,加速布局全国精准医学大数据网络,让更多患者享受一流医学创新服务;二是通过组建创业基金,投资创新技术团队,加快其成果转化和产业化,共创产业创新生态;三是通过创新体系获得的资本收益,继续加大对原始创新的投入,持续加强科技服务能力。 设立基金“孵化”新项目创造新场景 宝藤生物还设立了基金,用于孵化培育新项目。 “宝藤生物的投资模式与传统投资截然不同,不是简单地注入资金,而是积极参与被投资企业的团队组建和运营,依托公司成熟的体系,推动项目快速产业化。目前,宝藤生物已与多家高校合作,投资了一批具有产业化潜力的项目。”楼敬伟介绍,产业基金首期规模达10亿元,专注于投资国家生命科技领域的关键技术和平台型技术。 楼敬伟认为,生命科技领域前景广阔,宝藤生物正聚焦于此,寻找具有全球领先或国内领先的创新技术,这些技术不仅要有创新性,还要有明确的应用场景和巨大的市场需求。 “随着中国快速进入老龄化社会,抗衰老和慢性病防控将成为巨大的刚需市场。宝藤生物正围绕这些方向进行投资和布局,寻找能够解决当前技术难题、满足巨大市场需求的项目。”楼敬伟说。 践行“四千”精神 是创造新增长点的关键因素 谈及“四千”精神,楼敬伟表示,每一代浙商的创业方向不尽相同,但“四千”精神始终相通,是浙商保持活力的源泉。在发展新质生产力的背景下,“四千”精神也有了新的时代内涵。 “‘走遍千山万水’不再只是走遍山川河流,更是走遍全球的科技创新机构,物色前沿技术产业;‘想尽千方百计’代表整合已有的创业资源,努力实现技术突破与创新,完成技术出口。”楼敬伟说。 楼敬伟表示,自己的创业之路就是“四千”精神的体现。每一位创业者都不可避免地要经历一段曲折的道路。随着企业规模的扩大,如今,宝藤生物已拥有了花园式园区、先进的设施、知名的品牌以及广泛的布局。楼敬伟认为,传承和发扬“四千”精神,是公司未来创造新的增长点的关键因素。 “宝藤生物正致力于拓展东盟市场,实现国际化战略布局。挑战虽然严峻,但我相信,只要坚持‘四千’精神,就能克服困难,迈向更加光明的未来。”楼敬伟说。返回搜狐,查看更多 责任编辑:
语料“加速器”、AI健康顾问,大模型上下游成果秀技
AI医师助手

语料“加速器”、AI健康顾问,大模型上下游成果秀技

7月4日开幕的2024世界人工智能大会(WAIC)正在上海举办,现场版“百模大战”连日来上演,在众多基础大模型集中亮相的同时,从在医疗、农业、金融等行业落地的大模型应用,到为大模型获取“语料”扫清堵点的大模型“加速器”,一批大模型上下游创新成果也集中亮相。 如果将大模型比喻为正在疾驰的科技列车,语料便是珍贵的“燃料”。对中国的大模型企业而言,语料短缺问题仍然严峻。据悉,当前大模型数据集主要为英文,中文语料占比较低,跨页表格、复杂公式等元素的处理仍是大模型语料处理中的“拦路虎”。作为支撑大模型语料训练的大模型行业上游关键技术之一,合合信息展出的大模型“加速器”,最快1.5秒就能完成对百页长文档中的文本、表格、图像等非结构化数据的解析,帮助大模型加速从海量文档中高效提炼“智慧燃料”。 在展区现场,参观者可以选择物理、医学、金融、社会学等多个知识领域的文档,向大模型提问专业问题,例如对特定表格内容的总结、关键要素的分析等。对比测试结果显示,加载了文档解析引擎的大模型,在回答问题的速度、准确度上更胜一筹。 大模型使用文档解析引擎之前(左)和之后(右)的效果对比 技术人员介绍,金融报表、行业报告等高知识密度的文档中,表格的含义是最精华的数据指标。失之毫厘差之千里,一个单元格的理解问题,可能导致整个表格的识别结果产生误差,所以表格的还原准确率,直接影响着模型问答的效果。而大模型“加速器”中的文档解析引擎,能够对研报、论文等文档中的柱状图、折线图、饼图、雷达图等十余种常见图表进行“还原”,巧妙转化大模型能够理解的格式,使数据和图表中的信息能够被大模型充分提取、理解。 合合信息智能创新事业部总经理唐琪透露,目前,大模型“加速器”已被百川智能等多家大模型厂商应用于金融、医学、财经、媒体等多领域的文档的解析中,助力大模型更顺利地接轨“专业课”。 专业的大模型做专业的事,成为近年来国内大模型厂商逐渐达成的共识,医疗、金融等垂直行业大模型涌现,成为展区中的一大亮点。 王小川创立的大模型明星创业公司百川智能,此次也展出了其通用医疗增强大模型和AI医疗应用的最新突破。工作人员介绍,百川智能的通用医疗增强大模型不仅在USMLE(美国医考)的评测中超越了GPT-4,并且在由协和医院等头部三甲高年资主任、主治医师和心理学专家作为评测主体,对模型进行多角度评测的真实人工评测中同样超越了GPT-4。 在此基础上,团队研发了一款全新的AI医疗应用——AI健康顾问,AI健康顾问依托百川智能的通用医疗增强大模型打造,不仅拥有丰富的医药学知识,并且还具备医生思维。它能够像从业多年的全科医生一样,在用户提出问询之后,根据用户的问题持续提问,从更多维度更深入地了解症状,收集到足够多病症信息后再进行综合判断,给出诊断结果和用药建议。 比如,用户问AI健康顾问“我肚子疼,该怎么办?”,收到问题之后,AI健康顾问会相继向用户提出,“是否有呕吐、恶心、腹泻等其他的症状?是否发烧?肚子疼的具体位置?”等多个角度的问题,最后根据用户的回答综合判断病因,给出治疗建议。 面壁智能开源业内首个端侧大模型工具集、支付宝发布多模态医疗大模型、首个面向C端用户的可控人物视频生成大模型Vimi……上千种人工智能新成果在大会期间组团亮相“秀技”。 来源:北京日报客户端
支付宝发布多模态医疗大模型,联合20家机构发起医疗AI共建计划
AI医师助手

支付宝发布多模态医疗大模型,联合20家机构发起医疗AI共建计划

7月5日,在2024世界人工智能大会“可信大模型论坛”上,支付宝公布了其AI技术在医疗领域布局的最新进展:发布多模态医疗大模型,同时,全新推出包括医疗可信一体机、可信云等多款数智化解决方案。现场,支付宝还与人民卫生出版社、北京大学医学部、浙江省卫生健康委等20家机构,联合发起AI医疗共建计划,共同探索AI数智技术底座与创新应用服务。 支付宝多模态医疗大模型亮相 经过半年多测试打磨,支付宝医疗大模型正式亮相,这也是国内首批多模态医疗大模型之一。 蚂蚁集团大模型应用部总经理顾进杰介绍了背后的技术研发。蚂蚁百灵大模型已具备能“看”会“听”、能“说”会“画”的原生多模态能力,可以直接理解并训练音频、视频、图、文等多模态数据。支付宝医疗大模型以此为基座模型,添加了包含报告、影像、药品等百亿级中英文图文、千亿级医疗文本语料及千万级高质量医疗知识图谱,中英文医疗考试、基准测试达到或超过GPT4水准,医疗专业能力在中文医疗LLM评测榜单promptCBLUE中,位列A榜第一,B榜第二。同时,全栈自研医疗多模态结构,使得模型识别报告、药品、毛发等图像准确率达90%以上,相关技术在行业顶尖技术期刊与会议 CVPR、KDD、ECCV等发表了多项成果。 为了让回答对话更加可靠,在研发阶段,支付宝还与数百个专业医学团队、专家进行合作标注数据,保障信息权威可信,同时联合上海仁济医院推出首个中文医疗专科问答推理数据集RJUA-QA。模型测试阶段,用户、患者、医生参与问答反馈,在专业同时,兼顾患者关怀。 支付宝医疗大模型发布现场 目前,该多模态医疗大模型不仅提供智能问答、病历结构化和检索、辅助诊断,还可识别解读药品及上百种复杂的医学报告,进行毛发健康检测等,这些都能嵌入医院等机构医疗环节全流程,创新医疗服务的同时,也助力提升机构运营效率。 顾进杰表示,AI的深度应用,不仅对数据、算法、算力提出了更高要求,也对可靠、安全、隐私提出更多挑战,医疗场景下,保障技术可靠与数据隐私安全,至关重要。为此,支付宝面向行业推出全新的“医疗可信一体机+可信云”的解决方案,通过密态计算与存储,让医疗数据可用不可见,机构保管更安全。 据介绍,百灵医疗可信一体机,核心解决医院面临的算力不足痛点,可实现开箱即用,训推一体,支持国产算力,软硬件协同优化加速。医疗大模型可信云方案,通过公有云与专有云部署密态推理,聚焦解决数据隐私安全和商业机密保护问题。 AI医疗创新应用“联盟”来了 从去年以来,支付宝就加速了AI技术在医疗领域的开放与布局。去年11月,浙江卫健委应用支付宝开放的“AI就医助理”解决方案,依托大模型、数字人技术,打造了全国首个数字健康人“安诊儿”,给浙江居民提供云陪诊、健康咨询等服务,上线以来,服务了1000多家医疗机构。上海市第一人民医院,应用AI大模型,不仅上线了上海首个可语音交互的“数字陪诊师”,还在业内首创了生成式电子病历,将繁杂的文书工作从原本的10分钟缩减到了15秒。 医疗技术的创新,需要依托平台、产业、学界共同努力。大会现场,支付宝、人民卫生出版社、北京大学医学部、浙江省卫生健康委、厦门市卫生健康委员会、浙江省人民医院、上海交通大学医学院附属仁济医院、北京大学人民医院、复旦大学附属肿瘤医院、上海市第一人民医院、首都医科大学附属医院等20多家机构、企业,联合发起了AI医疗共建计划,共同探索大模型应用及各类专科模型创新研发。 支付宝AI医疗共建计划启动现场 支付宝副总裁、数字医疗健康事业部总经理张俊杰表示:“支付宝希望用最顶尖的技术做最普惠的服务,让AI像‘扫码支付’一样便利每个人的生活。支付宝也会持续开放AI技术与行业解决方案,携手合作伙伴一起,推动智能医疗走向普惠、普及。” 据了解,2014年支付宝支持全国第一笔远程挂号缴费,经过十年发展,平台已服务超6亿看病就医人群,是国内规模最大的医保第三方在线服务平台、一站式的医疗健康服务平台。目前,全国300多个城市、超3600家医院在支付宝上提供一站式数字医疗服务。返回搜狐,查看更多 责任编辑:
“这将使日本治癌技术突飞猛进”:软银押注AI医疗
AI医师助手

“这将使日本治癌技术突飞猛进”:软银押注AI医疗

本文转自:参考消息 参考消息网6月29日报道据《日本经济新闻》6月28日报道,日本软银集团27日宣布,将推出利用人工智能(AI)来分析医疗数据的服务。集团董事长兼首席执行官孙正义当天在记者会上强调新业务的意义说:“这是医疗和人工智能的新型融合。”这是一种依据个人遗传基因信息提出癌症治疗建议的机制,将有助于提升医疗水平。 软银集团与美国医疗领域的科技公司Tempus AI将于8月1日成立新公司,新公司资本金为300亿日元(约合1.86亿美元),由双方各出资一半。 Tempus AI是一家成立于2015年的科技企业,收集医院的各种临床数据和电子病历后,利用人工智能加以分析,并向医生提供治疗选项。医生将和患者进行讨论之后再决定治疗方法。孙正义表示,在日本市场,2024年年内也将陆续开始这项服务。 在日本,由国家指定的癌症基因医疗核心医院有13家。孙正义透露,已向东京大学、京都大学等医疗机构说明上述计划并得到赞同。他表示:“打算对数据进行匿名处理,同时建立统一的数据库,并无偿提供给医院。” 软银集团希望把Tempus AI的技术带到日本,升级日本的医疗体制。孙正义强调了分析大量数据的意义,并表示:“美国50%的癌症患者即770万人的临床数据,在日本也可以被用于分析数据。希望在几年内,日本50%癌症患者的数据可以在统一数据库得到分析。” 孙正义说:“去年我父亲因癌症去世。这种服务能尽早挽救更多生命,将使日本的癌症治疗突飞猛进。”他还“希望减少因疾病和死亡带来的悲伤”。 孙正义就今后的投资表示:“投资将以旗下的芯片架构设计公司安谋为中心,目标集中在打造智能水平为人类1万倍的超级人工智能上。” 软银集团之所以将业务扩展到医疗领域,是因为财务状况得到改善。因全球股价回升,集团旗下的愿景基金业务在截至2024年3月的财政年度里实现7243亿日元的投资收益,与上年(52794亿日元的投资亏损)相比有所好转。其流动性也维持在4.7万亿日元的高水平。 软银集团于2月宣布与沙特阿拉伯的政府基金下属企业组建工业机器人合资公司,今年以来正积极推进合作战略。5月,软银集团还向研发无人驾驶技术的英国公司Wayve Technologies出资。 据美国彭博社报道,软银集团还在讨论通过基金向美国人工智能搜索引擎Perplexity AI投资。 6月21日,日本软银集团董事长兼首席执行官孙正义在股东大会上讲话。(法新社)