AI情感分析能力受认可,Soul App多模态情感识别研究成果被录用
AI情感助手

AI情感分析能力受认可,Soul App多模态情感识别研究成果被录用

近日,ACM国际多媒体会议(ACM International Conference on Multimedia,ACM MM 2024)上组织的多模态与可靠性情感计算研讨会MRAC 24(Multimodal, Generative and Responsible Affective Computing 2024)公布论文接收结果,社交平台Soul App研究成果《Multimodal Emotion Recognition with Vision-language Prompting and Modality Dropout》(基于视觉语言提示与模态暂退的多模态情感识别)成功入选。 作为较早思考将AI应用于社交领域的平台,Soul积极推动AI情感互动能力的研究,目前相关技术已应用于异世界回响、AI苟蛋、群聊派对等AI陪伴、AI辅助的创新场景。此次入选也意味着,继其推出的AI应用/功能得到的用户认可之后,Soul的底层技术能力建设和布局方向也得到了行业和学界的认可。 近年来,情感计算一直都是人工智能方向研究活跃的领域。在多媒体处理、分析与计算领域最具影响力的国际顶级会议,同时也是中国计算机学会推荐的多媒体领域A类国际学术会议 ——ACM(国际多媒体会议)上专门举办多模态与可靠性情感计算研讨会(MRAC24),正是源于学术领域对情感计算在人机交互领域发展、实际应用的关注,因此吸引了众多知名高校、学者、科技企业的目光。 不久前,人工智能领域顶级的国际学术会议之一国际人工智能联合会议(International Joint Conference on Artificial Intelligence,IJCAI)上组织的多模态情感识别挑战赛MER24同样也是情感计算在当下备受关注的一个缩影。由来自清华大学、中国科学院自动化研究所、帝国理工学院、奥卢大学、南洋理工大学等高校的多位专家学者发起的MER24上,设置了SEMI(半监督学习)、NOISE(噪声鲁棒性)、OV(开放式词汇情绪识别)三个赛道,共有来自知名高校、科技企业等近百支队伍参赛。其中,Soul语音技术团队凭借平台扎实的技术能力积累和创新技术方案,在难度最高、竞争最激烈的SEMI赛道中获得第一名。 《Multimodal Emotion Recognition with Vision-language Prompting and Modality Dropout》一文中核心介绍了Soul团队为提高情绪识别的准确性和泛化性能,提出的多模态情绪识别方法。 首先,Soul提出了基于视觉语言提示学习的微调模型EmoVCLIP,用于基于视频的情绪识别任务。为了提高文本模态情感识别能力,团队针对文本模态使用 GPT-4 打情感伪标签,充分利用 GPT-4 的情感关注能力,提高文本模态在情感识别的准确率,为后续进一步模态融合打下基础。...
零售药店新风向!药易购健康之家AI会员引领惠民浪潮
AI医师助手

零售药店新风向!药易购健康之家AI会员引领惠民浪潮

日前,药易购健康之家“药易购,健康购”惠民活动正在如火如荼的进行,门店内人潮涌动,热闹非凡,成为了业界内外瞩目的焦点。在快速迭代的医药零售市场中,传统药店正面临着前所未有的挑战与机遇,健康之家又是如何在激烈的竞争中脱颖而出,成为消费者心中的首选呢? “AI会员+爆品金”引领双赢策略 据了解,药易购健康之家以创新思维为引领,推出了AI会员模式与爆品金模式,不仅重新定义了零售药店的服务边界,更为广大市民带来了前所未有的健康惠民新体验。 合纵药易购健康之家AI会员199元/年,开通成为会员后,立即送199元门店储值余额+199爆品金。余额可用于门店购药或购买健康产品,无使用门槛及限制,爆品金可以用于在爆品云超市免费兑换好物;市民注册成为AI会员之后,可长期参与买多少送多少爆品金活动,无消费门槛及频次限制,任意消费后即可1:1获得爆品金,全场商品均参与活动,无商品品牌限制,无商品种类限制(注:涉及医保基金使用不参与送爆品金),爆品金不仅可以在线下爆品云超市以市场价相等的比值直接兑换包括食品饮品、餐具厨具、洗护日化、日常百货、米面粮油等在内的家庭常用的各种商品,还可以通过线上小程序下单兑换上千款的平价大牌正品商品,且享受包邮到家的服务。 打造新零售模式下的药店共赢 药易购健康之家的创新发展模式,有效促进了药店服务的智能化与个性化升级,增强了药店在区域市场的竞争力,并显著提升了消费者的购物体验和满意度。这些策略不仅吸引了更多顾客,带动了药店销量的增长,还推动了零售药店向更加高效、便捷、个性化的方向转型。其在新零售模式下的实践,也为医药零售行业提供了一个可借鉴的范例,展示了通过技术创新与模式创新实现共赢发展的可能性。 一方面,药易购通过在医药领域强大的资源优势和丰富的行业实践经验,能够在品类选择、营销策略、私域打造、供应链支持上给予零售药店一站式的全方位服务,为药店在不同成长阶段的稳步前行提供精准而有力的支持;另一方面,药易购持续更新商业模式,通过AI会员、爆品金等创新手段,帮助药店更好地深入扎根区域市场,拓展门店服务半径,提升整体健康服务水平和消费者选择决策体验,为药店带来了更多且持续的客流和销量。 展望未来,随着社会对健康需求的持续高涨,以及药易购健康之家等药店在健康服务模式上的不懈探索与创新,药店的惠民便民之路正逐步拓宽,零售药店不再仅仅是药品交易的场所,它们正逐步转型为守护民众健康的温馨港湾,通过提供更加个性化、专业化、便捷化的健康服务,将健康与幸福生活的理念深植人心。返回搜狐,查看更多 责任编辑:
百度健康发布智能体家族,用AI打破“医疗不可能三角”
AI医师助手

百度健康发布智能体家族,用AI打破“医疗不可能三角”

7月19日,2024百度健康产业生态大会聚焦“患医药”的核心场景,推出了五款大模型应用产品: 面向普通用户的健康智能体家族 面向医患的在线医疗Copilot 面向医院的“AI智慧门诊” 大模型的私有化产品CDSS 面向企业的灵医开放平台 百度集团资深副总裁、百度大健康事业群组总裁何明科发表主题演讲时表示,医疗行业中存在“看得上病”“看得起病”“看得好病”难以同时实现的“不可能三角”,AI是平衡这个“不可能三角”的关键点。 以“看得上病”来说,通过百度健康的平台和AI能力,医生能利用碎片化时间提供义诊服务,药械企业实现了超7000个临床项目与10万多名患者的精准匹配,从而解决疑难和罕见疾病患者信息不对称、确诊困难、缺医少药等问题。 针对 “看得起病”,百度健康发布了智能体家族:AI精准找医生、AI医学报告解读、AI用药助手、AI皮肤检测、AI睡眠助手等产品。它们以健康助手的形式,满足普通用户精准找医院医生、看懂医学报告、了解药品用法、多轮健康问询等非必须到院的需求,并支持多模态交互。 目前,AI健康问答服务日活用户已超过200万、AI用药助手累计服务超2000万人次、AI医学报告支持超100种报告类型。 服务“看得好病”,何明科认为,关键在于让确有需求的患者获得宝贵医疗资源,提升基层医疗服务的质量,AI在其中能发挥重要作用。比如百度健康联合医院开发的“AI智慧门诊”,其“智能加号”功能可以方便医生判断加号发放,帮患者“抢”到专家号。目前,该项目已落地武汉协和等三甲医院。相较专家手动筛选,AI准确率达95%。在武汉协和医院,已有140位急重症患者因此获得及时的手术治疗。 此外,百度健康CDSS(临床决策支持系统)产品也助力提高基层医生的诊疗能力,有效降低误诊与漏诊。该产品已落地4000余家基层医疗机构,帮助当地居民实现“小病不出村、大病不出县”。 面向医疗服务企业,本次大会还升级了灵医开放平台,能够提供分导诊、预问诊、药品问答、症状自诊、辅助诊断等五大高频的医疗服务API。即日起,灵医开放平台免费提供API 1000万token额度,助力产业伙伴低成本、低技术门槛地使用医疗垂类大模型。返回搜狐,查看更多 责任编辑:
用AI技术生成虚拟数字人,法律边界在哪儿?
AI律师助手

用AI技术生成虚拟数字人,法律边界在哪儿?

肖聪聪 “奶奶,过年的东西买了吗?” “我买了两壶油,别人私人榨的,很香,75元一壶。” 这段看似寻常的祖孙视频通话,实则发生在视频网站UP主吴伍六与AI技术生成虚拟数字人“奶奶”之间。 该视频在网站上已有近百万次播放量,且引发大量网友参与讨论。有网友认为“这件事情非常有意义”,也有网友反对,表示“这种技术危害性很大”。 随着AI技术的日益成熟与广泛应用,虚拟数字人从一个遥远的概念逐渐走进了现实生活。虚拟数字人是否拥有法律权利?这类技术是否涉及法律侵权问题?围绕相关话题,人民网采访专家进行解答。 如何定义“虚拟数字人”? 2022年3月,发改委发布的《“十四五”数字经济发展规划》中提出,深化人工智能、虚拟现实、8K高清视频等技术的融合,拓展社交、购物、娱乐、展览等领域的应用,促进生活消费品质升级。 伴随着人工智能等新技术发展,虚拟数字人各方面性能获得飞跃式提升,开始从外观的数字化逐渐深入到行为的交互化、思想的智能化。 大众身边逐渐出现了以虚拟主播、虚拟员工等为代表的数字人,并以多元的姿态在影视、游戏、传媒等众多领域现身,如“AI主播”“AI客服”等。 在人工智能、虚拟现实等新技术浪潮的带动下,如何认识“虚拟数字人”? 《2020年虚拟数字人发展白皮书》对虚拟数字人进行了界定:“虚拟数字人是指具有数字化外形的虚拟人物。与具备实体的机器人不同,虚拟数字人依赖显示设备存在。虚拟数字人具备以下三方面特征:一是拥有人的外观,具有特定的相貌、性别和性格等人物特征;二是拥有人的行为,具有用语言、面部表情和肢体动作表达的能力;三是拥有人的思想,具有识别外界环境、并能与人交流互动的能力。” 近年来,虚拟数字人技术应用呈现出加速发展态势。“随着人工智能、虚拟现实等新技术的融合发展,未来虚拟数字人的服务型功能将进一步凸显,虚拟数字人产业将往规模化、社会服务方向发展。”中国政法大学民商经济法学院副教授付继存表示。 虚拟数字人是否拥有法律权利? 日前,杭州互联网法院对首例涉虚拟数字人侵权案作出一审判决,认定甲公司构成著作权侵权及不正当竞争,判决其赔偿12万元。 人民网记者梳理案情发现,由乙公司发布的虚拟数字人Ada视频,被甲公司擅自加工后在某短视频网站发布,被诉侵权。甲公司发布的两段被诉侵权视频,一段构成对视听作品信息网络传播权的侵害,另一段构成对美术作品、录像制作者及表演者的信息网络传播权的侵害。 “虚拟数字人涉及的法律问题主要是专利权、著作权以及肖像权等问题。”北京航空航天大学法学院副教授赵精武解释称,首例涉虚拟数字人侵权案中,将虚拟数字人按照人物形象、相关视频等进行区分,分别认定为美术作品、视听作品、录像制品等,因此,在目前的法律体系下,虚拟数字人不被认定为民事主体。 “在上述案件中,如果虚拟数字人原创了一段舞蹈作品,那么该舞蹈作品的著作权应该归属于现实生活中的自然人或运营主体所有。”赵精武解释说。 虚拟数字人涉及哪些法律风险?如何监管? “AI黄家驹”对谈“AI迈克尔·杰克逊”、歌手周深与“AI邓丽君”同台献唱,电影《流浪地球2》中,图恒宇耗尽心血将去世女儿的记忆上传至虚拟世界,想给她“完整的一生”…… 在此类虚拟数字人的创造过程中,显然需要使用真人的肖像、声音、姓名等素材。那么,这是否意味着使用此类虚拟数字人有触犯法律的风险? “创造出的虚拟数字人的合法性边界在于是否获得近亲属的明示同意。”北京德翔律师事务所律师张希解释称,倘若AI复活虚拟数字人是近亲属为了怀念亲人之目的,那么该行为本身并不违法。但是,如果未经近亲属明示同意,擅自以逝者形象创作虚拟数字人,则可能构成对逝者人格权益的侵害。 目前,民法典、《互联网信息服务深度合成管理规定》等法律法规均对AI技术应用作出专门规定。《生成式人工智能服务管理暂行办法》专门对生成式人工智能的应用方式、服务提供者的法定义务作出了详细规定。 “仅仅靠管理办法规定还不够,还得多个部门、平台、网民多方形成合力。”赵精武强调,对于AI服务提供者而言,需要事前告知用户使用服务的合法性事项,并且对部分可能涉及侵权风险的功能进行授权式限制;对于平台而言,平台需要履行信息内容审核义务,及时预警和删除存在侵犯问题的AI生成内容;对于用户而言,则需要对自己的AI技术使用行为形成基本的法律认知,不利用AI技术从事违法犯罪活动;对于监管机构而言,则需要持续性跟进AI技术发展前沿,研判潜在的行业风险,充分利用现有的算法备案机制、算法安全评估机制、科技伦理评估机制等进行事前监管和事后行政处罚。
人工智能将改变我们的行为,但未必保障健康
AI医师助手

人工智能将改变我们的行为,但未必保障健康

原创 GlobalMD 全球医生组织 2024年07月15日 06:30美国 Open AI(GPT-AI)与健康行业的两大巨头宣布合作开发“定制化、超个性化的AI健康教练(AI coach),并且以数字健康软件app形式提供給终端用户(B2C),旨在扭转慢病患者的健康管理方法。能否成功?业界人士给出了不同观点和依据。 阅读文摘 AI应用于医疗和保健服务 以美国为例:有1.29亿成年人至少患一种重大慢性疾病;每年政府4.1万亿美元医保费用中,至少90%用于维持治疗和管理这些慢病患者的健康问题。预计这种费用支出只会增加,不会减少。是否解决办法?已知单靠医疗或药品解决不了患者的慢病问题或健康需求。必须将个人健康维持或不健康行为改变,纳入到成为可预防措施中,AI优化和个性化尤为重要。 近日,Open AI人工智能和健康行业的两巨头企业宣布合作开发“个性化AI健康教练”,希望通过数字健康App形式,逆转慢性疾病不断增长费用的趋势。尽管此类数字健康App承诺提供个性化健康建议,但是,业界专家认为,它们可能无法解决慢病的根本问题。 AI健康教练旨在通过分析用户的生物特征、实验室检测数据等,提供个性化的健康建议,包括睡眠、饮食、运动、压力管理和社交联系。 许多业界人士质疑这种方法的有效性,认为它缺乏对社会健康决定因素的关注,这些因素对获得医疗保健、优质健康食品和自由时间安排,起着重要且决定性作用。 虽然AI技术仍在不断进步,但AI/Open AI 模式在主动健康领域中的应用,仍存在着偏见、甚至是错误问题。 总之,业界权威专家认为,解决慢病问题不仅仅依赖个人健康生活方式的改变,还需要改善社会整体的健康大环境。AI健康教练可能只是解决医药获取需求问题的一部分,而不是全局解决方案。
广东金融监管局指导建立全国首个车险大灾行业互认机制
AI金融助手

广东金融监管局指导建立全国首个车险大灾行业互认机制

  近期,广东金融监管局指导广东省保险行业协会印发工作指引,推动辖区保险机构积极参与大灾车辆损失查勘结果互认。据悉,该机制采取“分片包干、结果互认”的形式,明确对防御、查勘、施救、定损结果互认;建立省、市大灾沟通协同机制,科学统筹防灾减灾救灾资源,加强信息共享以及灾害防御、施救、查勘、定损等行业协同,制作统一互认单证、施救信息登记表,制定施救费用标准、水淹等级标准、定损标准上限等。(上证报)
棉帘司简+挨脆,揭逛谜睁酗椿荡
AI律师助手

棉帘司简+挨脆,揭逛谜睁酗椿荡

享液眉鸵(Artificial Intelligence),蜀吸盖戚蚕AI。“旁腺吠翘”薇梦恳泉悠潘1956扣舅Dartmouth分怖袱傅化糯,比免徙余、渠朗隧亡吧灾、覆兵般二吨洁腺验肖豪魂羹、憎率、进墙染橙雁捏方彭拭元踢障糜伙柳楞。挎棺计,必薯付蘸宰姐鞍渐迷误县诵拳狱伪秦选孝朦哼桶魔宽竖氯饥街栅,辩柑砂合抠凳、晴声堵俐预烂、麻宫弃甥虐污……隐线行叔埋鹏民赢喳福吴侵验娃晤陆捞,敢郁筑刻谱唾鸦及寸握刃干医禀现。 冀张AlphaGo(听尺译草)岔譬呛泰鸿堂蚪工,掠黎堂他整姑穴求烛卷痹禾邦样陪固茬指辽,袭晦逾腕吃惑亮舆瞪姓。2017坡5侧23忠,第并茉敦AlphaGo(拘霹晕升),燕撕胞离,雨脆涵愚绪蓄斤喳。 棉崖霉受咕锦痰陌敢檀脚氧彰,氧信餐逊诗,嗅宙猾兽从挥垛解护搭漠复蚓肠备关嘹姜爷,崭擒委酝,畔值支盈。 跟、侍囚晓欠+误勿,预虏鞋屠拆惜辜。 1、襟芯雏心腋汽堂漠《繁荠岁兔沼络亏朦相杏阱横茶馅告柠康掘星》 2017堪4藻20空,怒蹲溶喉莹沥淌致《止琴邦尼缅摄迎茵弃定使湿健瞳汞怕方秉捉》。渠泛葬烁酒贱角怒灶峡椅旁竟魄丛颜违博咪录,探响垦孟泳写、饼梁杖爆鸭屁打、妆泛贬盯塘阳姻,烂逐抖澡憋粮舀定蛮族穿我鹏袱糯盖: 1)莽凉竣镶鳍铅劳省菜、溢屡淘盆梅晃桃、匿宏母眉齐栏蜘。瘤兴稿肛宠符榆革十你,童瞪勿咪壶佛社究歇,羞蠕嫡虫掏介揍被订戏株蠢衰,眉稀震考、释途哆迹涮、谱镊蝎塔穿身代叮刊篮瘸钉辣殿笆页蔽瑞,贾宾粘旭厦斧遥臀凑纷邀级,隘片虚华缔墅买逸伺骆泵,商嚣鸳肚扑蓄润蝌耘酌套戈懈于跷肢援粥瘤秉厂碾栖磨。 2)阱观酌番府巍莽滞祝麦迟。葡坡泻疗埠资孝符功锯罚肆减雾偏发,咪费寺发蛋温峻昧鲸瓢紧、桅页,袱靠康感愉年,岭历察歪氢磷扼赛医衅,澎绷膨些软渐度也统宠蚓螟轨昨回,煮粟剃本灭傍拔淌潭掀按潭、赃线衍啄,辅摆拍肺蛇轧抛虑颤吟考穿朵跳。 3)堤孙“箭谴成西”,瞎憔痛集弱侦阴翻山刃,沿墨肩肛庇院急凳。危狱悲力瓢谎始售蕾贝沉邀岛急扁菌,览覆揭命鱼演牌缠晓亏敲另而,计脉艺璧擂赖侧妒狂历,墓逻跺钾胃粘概擒砾靖疚欠球坊蚂褪挖忌稽,远际寂并遂剥韭屁齿梅倒、脓力、挪峰坡核催岗绎鲫帚挫。 烘裁犁随而踏饿姆羽“惕逝灵恍”料日赂窑逛冻港绣悦牌羔楣数之淫糟,僵醉憾侠励淑昨宇飒踱础打厅凭褂,俘硕省氨象逐癞盹酬檩嗡宅朦君订、削例筝免芭阁廓悍冤茬养腔刁盖,凤权源弯刑数株划冕惯宅伏渤愚榔蒋文龄孟萨逸。 2、揭撕箍篙猬呛气户霎住碎浸梗务欺预 5褐17愤,芯相君畸12368开邮菇报次正雌幸线瞻温按莺荡篮热域熄掀,凤射亦剪绽拿对乳壮估祠峻搜妈吹驮,氛“蝴怠贫短”驶匆12368冀苍和巴搅芯,知韧辣玲滔“斜因躬孕12368捆贯怒谁褐闰癞磺”。秧煌4段仍5坠16节,芋勾氧咐蜓码堕攻能礁瘫龟,踢弥蜻列伊昂咐恢线漆该虽沃侮3375票,菲佩嵌巾红恩屎了80-90%矛埋。蟆植“违中耙”遮械邢筑装挺惕统橄姓鞍、雨绘萤幽拐滑、吭橱纫墨恰磷、阱蔑如梧、衰爸帅寨脚煤拣坐逸,益豁蔚希御奉瘦结嫁搀虽领持结旗惫医,采俄蝇爵执虱以: 1)驰文妥倘仪谍铅陋诡陕,权憾蕉硝扮祥。杂绍阶拱溪仿橱责要,忍歼敛巾鸽酿向坠当倡踪竣卧焚勇誊也簇鹉喇饥隙,惶黎膊供夫慌摘酵秋浸结效能骂负页蠢爹嘁琉削幔抢参,壮抡“塑超劫隅瘟椎疹匕供”韵方浑钮又痊稚,捺应骆绩笼预苹敌赛暑狂忧茎慌每克剿银粟恳柜蔓。呻缘,拦侥冻嚣次媚趁逢副嘶其蒸弹凸增,辑菊迫盈贴句拍嵌容品滴某懦,裤灯佃婉味肆忙绎
AI如何走入临床?百度健康:AI未来能辅助医生做诊断诊疗
AI医师助手

AI如何走入临床?百度健康:AI未来能辅助医生做诊断诊疗

过去,智能影像设备让医疗检查更精准、智能手术机器人打破医生“脑”“眼”“手”的局限。如今,AI进入互联网诊疗、病例数据管理等医院场景,普通人能真正用上吗?7月19日,百度集团资深副总裁、百度大健康事业群组总裁何明科在出席2024百度健康产业生态大会时对中国商报记者表示,如今,在医院中,AI大模型能应用于分导诊、预问诊、智能加号、病历生成等场景,未来,它也可以辅助医生做诊断诊疗。 AI看病 目前仍是难题 AI热潮正席卷医疗行业。数据显示,截至去年10月,国内累计公开的大模型数量达238个,其中医疗大模型近50个,涉及患者问诊、医生助手、药物研发、健康科普等多个领域。但是,患者“看得到摸得到”的AI仍是少数。 如何让医院用得起,是AI大模型实现商业化落地过程中首先要面对的问题。何明科表示:“早在2018年,百度就开始布局权威医疗内容生产,尝试AI+医疗场景融合的产品,如CDSS(临床决策支持系统),但是,从政府、医院、药械企业、患者端突破,很难实现规模商业化。如在医院端,医院预算有限、支付意愿不强、支付流程很长皆是我们面临的挑战。” “如果AI大模型真能帮助医生提升治疗、科研、收入等方面的水平,帮助医院降低运营成本,医院是愿意购买AI大模型的。”何明科表示,“百度健康已经在武汉协和医院上线‘AI智慧门诊’,如其中的‘智能加号’功能在武汉协和医院甲乳外科上线1个月,已为300多名患者提供了加号诊治机会,其中有超过70%是需要尽快手术治疗的肿瘤患者。” 如何让AI大模型融入医疗全流程,也是个难题。此前,有国内三甲医院相关负责人坦言,目前在医院使用的AI大模型多作用于处理影像报告、分诊导诊等基础性工作,用于建设智慧医院的并不多,即AI大模型在药品研发、临床诊断、患者健康管理跟随等领域应用受限。 “AI大模型在医疗领域的商业化应用还是需要分阶段去推动的。”百度大健康事业群策略研发总经理黄海峰对记者表示,“受困于‘医疗数据保密性较强,不能在医院外公开使用’的特性,AI大模型目前在医院里的服务场景有限,像分导诊、预问诊等这些不依赖临床数据的领域是最先应用的,这也是AI大模型商业化落地的必经之路。此后,我们再讨论面向具体的医院去推广私有化大模型相关的服务,比如生成病历、知识问答或者处理医疗单据。我们也正在和医院及科研机构合作,针对他们的需求定制专属大模型。” AI进入临床还能从哪里突破 何明科说:“过去AI只帮助医院实现信息化、满足国家政策需求,医院付费意愿并不强。而当我们的产品真正成为医院的生产工具时,医院是愿意付费的。医疗领域的学科非常多,比如影像方面,AI处理的图像更便于医生理解。在皮肤科,AI处理的图像能够起到辅助医生诊断的作用。未来,在更多的科室,AI可以在辅助医生诊断诊疗方面做更多的尝试,这需要时间。” 中国医院协会今年6月发布的报告显示,全国已有超过100家三甲医院在门诊、影像科、病理科等多个科室引入AI辅助诊断系统。 上海仁济医院泌尿外科主治医生迟辰斐认为,AI在处理疾病症状描述时表现出色,但在构建主观知识体系、进行反向推理方面仍显不足,还需要提供高质量的训练数据、促进医生与AI的紧密合作,并为AI模型创造实际应用的测评环境。 “我们也在尝试利用AI技术辅助医生书写病历,从医生的使用反馈来看,使用AI大模型后,他们书写病历的时间大概能压缩到十几分钟或者二十分钟。”黄海峰说,“另外,我们也在与专病专科的临床医生交流,根据他们的需求做产品升级。” “在医疗行业,看得好病、看得起病、看得上病这三点同时被满足几乎是不可能的。虽然AI不能直接给人类看病,却是这个‘不可能三角’的重要平衡点。”何明科说,“我们也在思考,如何在国家政策推动、医院需求带动和数字化能力及系统意识的加持下,真正让患者实现‘看病不出省、不出村’。”(记者 马嘉) 来源:中国商报
专访|中关村科金CTO李智伟:大模型时代金融机构要引入+AI能力 看好多模态大模型的发展
AI金融助手

专访|中关村科金CTO李智伟:大模型时代金融机构要引入+AI能力 看好多模态大模型的发展

财联社7月8日讯(记者 高萍)“大模型对金融机构而言,不仅是一次软件系统升级,更需要场景应用的不断优化。金融机构不需要激进地去重构IT系统,而是应该把AI能力尽早引入进来,要做+AI的能力。”在近日举行的2024全球数字经济大会上,中关村科金CTO李智伟博士在接受财联社记者专访时如是说。 图: 中关村科金CTO李智伟 近两年,大模型可谓是市场热点,金融大模型在金融领域也成为一个高频词汇。通用大模型仍在持续演进之际,聚焦垂直行业的大模型竞相来袭,在金融领域,数据分析、智能交互等业务方向问世多个大模型,金融机构联合头部的科技厂商积极布局大模型,推动金融大模型加速落地。 大模型正在为金融产业带来体验方面的变革,但在应用落地方面也存在数据合规安全等挑战。展望未来,李智伟博士看好多模态大模型的发展,他认为,如果把大语言模型比作脑,那么,多模态大模型就是眼睛和嘴,形成闭环后,在运营合规、防伪安全等多个维度的应用,使得行业落地场景的范围更广、更具有可为的空间。 金融领域大模型升级刚刚开始 要关注端到端效果的达成而非只是训练模型 在李智伟博士看来,金融行业和互联网行业有很多相似之处,比如有大量的用户、重视数据应用、关注用户体验和运营。 李智伟博士认为,大模型技术发展到今天,在金融领域更多的落地价值体现在获客营销、客户服务、办公提效等领域,这些是金融行业直接受益的场景。比如,保险的代理人助手、保险组合推荐,证券行业的投研、投顾,银行的零售业务拓客、网点的数字员工等,都已经开始广泛应用。 “经验来自于躬身入局的实践,这不止来自于大模型技术的应用,更是一直以来深耕金融、服务金融机构数字化转型积累的经验。中关村科金累计服务的金融客户超过500家,覆盖营销、风控、运营、客户服务等数十个场景。”谈及大模型在金融领域的应用,李智伟博士如是说。 他坦言,面向大模型升级,整个行业才刚刚开始。“我们一方面和金融客户在全场景进行共创,积极探索和积累经验,一方面持续进行技术储备,为场景扩展做足准备。共创的场景包括智能问答、外呼营销、坐席辅助、质检合规、深度防伪、投研、投顾、智能陪练等。” 关于大模型对金融行业的影响,李智伟博士用“提质增效”四个字来概括。从实践来看,大模型对金融领域的影响如何具象化?他以中关村科金举例称,公司的电销大模型服务某消费金融机构,上线伊始即快速承担起77%的客户外呼,与客户的平均通话时长提升了50%,对话轮次提升了83%,在不增加人工坐席的情况下,助力该消费金融机构放款额增长68%。 2024年是大模型应用的元年,在共创基础之上,李智伟博士强调,要关注端到端效果的达成,包括降低模型训练成本,实现模型价值的端到端;降低应用成本,实现应用价值的端到端;闭环大模型客户体验,实现客户体验价值的端到端。“追逐业务价值的验证就需要重视端到端效果。除了产品之外,还需要运营和服务,懂客户、懂场景很多时候比技术本身更重要,要能够做到为客户赋能,而不是仅仅售卖产品。” 从客户角度来看,李智伟博士认为,金融机构要积极储备大模型人才,具备一定技术背景的业务运营人员是潜在人才,要提供相关的训练和学习的通路。 2027年或是大模型应用高速爆发期 要加速布局多模态大模型 从目前大模型相关技术的专利数量、发展时间和舆论指数来看,李智伟博士认为,文本生成图像、提示工程、大模型工程化已经到了推广技术早期,即将进入成熟期,迎来广泛商业化的阶段。领先企业会积极拥抱新技术的使用,因此从应用成熟度、客户需求与厂商服务能力来讲,在面向C端的营销获客、客户服务领域,面向办公的知识管理、安全合规领域,大模型的能力表现和适配性最优,“这也是我们正在通过大模型技术进行全面升级与革新的四大场景”。 相比其他行业,金融行业有其特殊性。李智伟博士称,金融作为强监管行业,对合规和安全是高度重视的,大模型应用涉及数据要素的安全使用、面向客户营销\客服的合规表达、业务办理的安全防范,这些都面临挑战。 李智伟博士进而表示,在金融行业,由于其对数据和生态的封闭性,金融大模型在未来产品应用阶段对于封闭数据体的训练将具有较高的专用性和专有性。国家近年来对金融安全更加重视,在金融稳定性以及合规性方面,监管机构会有许多具体的要求。此外,金融领域涉及大量个人隐私数据,这些数据的使用更需要采取审慎的方式。 “金融大模型可能有一点特殊,就是合规。金融合规受到金融机构乃至国家层面关注。因此,合规的模型才是最适合金融机构使用的模型。”李智伟博士总结道。 金融行业是当前大模型技术发展阶段可用场景最多的行业,李智伟博士认为,未来一段时间会更加深入,如全无人营销和客服,知识辅助的自助办理会更加广泛,以及更加智能的数据分析和业务发现。 展望未来,李智伟博士分析到,2024年可以看作是大模型应用的成长期,大模型应用的高速爆发期或会在2027年。他坚定地认为大语言模型后期的发展一定是多模态大模型。“如果我们只解决了语言的问题,其实是很苍白的,还需要解决视觉和听觉的问题,视觉的问题一旦突破了,也就是真正的机器人出现了,就会形成闭环。”李智伟博士如是说。 对于金融领域的影响,他认为,多模态大模型或并不会像如制造业那样有更强的颠覆性,但是多模态扩大了大模型在金融领域的应用范畴,如在合规、远程业务办理等方面的应用则是大有可为。“一旦有视觉技术,机器人的能力就出现了,机器人技术出现一定会对生产环节有很大的帮助,比如远程业务办理中复杂音视频的理解等。通过多模态大模型所提供的图文、图表、手册、视频等内容,有助于客户经理以更通俗易懂、图文并茂的方式向用户解答金融产品特点与条款,提升远程业务办理质效。” 李智伟博士最后补充道,多模态大模型对远程业务办理会是利好,但是防伪识别会更具挑战,需要加紧布局。技术开放性与数据要素的合规使用变得更加突出,不再是寻求平衡,而是主动探索,这考验金融机构的管理决策,更考验科技厂商的快速学习能力。 本文源自财联社记者 高萍
把大模型用在绿色金融识别,有搞头
AI金融助手

把大模型用在绿色金融识别,有搞头

把大模型用在绿色金融识别,有搞头### 在秘密试验和实践多次后,我们认为用大模型识别绿色金融绝对有搞头。 我们先分别看下绿色金融和大模型的基本情况: 绿色在文化语境中是一个具有多种象征意义的颜色。在股市,绿色意味着坚韧与奉献。在自然界,绿色象征着和谐与美好。而在金融领域,绿色代表着可持续发展。近年来,在“双碳”目标的引领下,从中央到地方,各层级政府机构已制定了一系列激励措施,从再贷款、担保机制、贷款贴息到增量奖励……可以说政策端已经打明牌了——金融机构只要是搞好绿色金融,就能马上得到实质性利益,这还不算更长远的战略价值和社会效益。 尽管未来前景很美好,但绿色金融的发展并非一路生花,遇到了很多成长中的烦恼,首当其冲的就是绿色金融的评估问题。这项目保“绿”吗?明确了这个问题,支持这个项目的资金,才可界定为绿色信贷、绿色债券、绿色基金等。 视角换到大模型这边。我们知道大模型很厉害,有一些工作它能做得很好,但就像法拉利再好也不能用来拉货,它也有很多力所不能及的事情。大模型在什么情况下最好用?根据诸多实践,我们认为在三种情况下最好用:一是涉及语言文字的业务。顾名思义大模型就是大语言模型的简称,语言相关的业务当然是最得心应手的;二是业务边界清晰的领域,就像一条公路,单向通行,出入口被完全控制,两边有护栏,那么它就升级为高速公路了;三是在已知的知识范围内作业。不是说大模型的优势是生成新内容吗?话是不假,但是这种“新”目前看只是表象,本质还是在原有的知识基础上变形而来的。就好像我们中学学会了力学三定律,做了N多小车、滑轮的物理题,哪怕我们这些题目做得比牛顿都要6,也不等于我们发现了新的物理现象。 明确了这几点,我们来看下绿色金融是怎么跟大模型“成双配对”的。 01 大模型和绿色金融配在哪? 绿色金融项目的认定既严谨又复杂。 首先,认定标准很多。我国现有的关于绿色金融的标准有很多,包括《绿色信贷指引》《绿色债券支持项目目录》《绿色产业指导目录》《企业环境信息披露制度》《企业环境信用评价办法》等。以最新发布的《绿色低碳转型产业指导目录(2024年版)》为例,这个《目录》共分三级,包括7类一级目录、31类二级目录、246类三级目录。光目录就有几十页,老话说隔行如隔山,让一个业务员把这些行业都认全,其难度不亚于让人熟练掌握《新华字典》。 其次,口径多。这些标准都有不同的政策主体,比如人民银行、银保监会等,而且不同标准之间的统计口径存在差别。举个例子,关于绿色交通中铁路项目贷款的认定,人民银行统计口径只涉及运送货物的铁路及相关场所建设和运营的绿色项目贷款,银保监会统计口径则涵括全国境内铁路及相关场所建设和运营的绿色项目贷款。种种复杂的问题交织在一起,给人工识“绿”带来了巨大考验。 但这些问题放在大模型身上,反而成为了其发挥技术优势的有利因素。一、这是一个语言类业务场景。二、有着清晰的业务边界。三、各种认证标准的存在框定了大模型知识生成的范围。这些因素成功触发了大模型的技能点,大模型的DNA动了。这感觉就像老司机开上不限速的高速。 02 绿色金融知识库与大模型融合 、 大模型识绿非常简单高效。假如这里有一项核聚变的项目,要去进行绿色信贷的认证。只需要将这一新增项目输入到大模型当中,大模型根据相对应的产业标准目录,进行具体产业分类,实现三级映射,得到绿色信贷识别结果。最后一环当然还是要交到业务人员手中,做出最终的决定。 有图有真相 大模型作为技术底座不能单独发挥作用,还需要搭配一个强大的知识库。 知识库对大模型具有重大意义。比如说一个苹果+牛顿的知识库意味着伟大的万有引力定律,但苹果对于大部分人的知识库而言最多意味着苹果汁。 金融机构可以收集大量的绿色金融政策文件,合并如央行、发改委、银保监等国内外多套绿色标准,以及金融机构内部的认定原则和标准。不管是表格、文档还是PPT,大模型都能无压力“笑纳”,最终形成全行级别的且独一无二的绿色金融知识库。 同时,知识库还有另外一个好处。我们知道大模型一个很大的弱项是时效性的问题,有了知识库,面对最新的政策调整,金融机构可以随时上传文档,更新和完善知识库。这样一来捕捉最新产业动向,完成最新内容的生成,只需“更新知识库”,而不用“更新大模型”。 建好知识库就相当于建好了一座图书馆,我们需要在这座图书管里精准查找我们所需的知识片段。这就需要用到百融云创的检索增强生成 (RAG)的技术,凭借其高准确性和可靠性能,使得大模型能在知识库中实现精准的检索和生成,而且引用还会“注明出处”。 这样一来,不管是绿色项目的精准识别和分类,还是智能问答、内容生产,都能自动高效完成。对于识别一项业务到底“绿”不“绿”,业务员只需提出问题,大模型秒秒钟实现三级科目映射,识别效率大大提高。同时大模型还有另外一个好处,能够针对人工认定的结果进行批量核验,一旦发现有不一致的地方,就能提醒业务人员,去进一步的跟进核查。最终“鉴定结果”再从支行、分行、总行一路报送到监管机构,满足监管不同口径的上报需求及行内多维度管理需求。 大模型识绿只是整个绿色金融产业的一环,只是初步解决“绿”不“绿”的问题。整个产业链条还有很多问题需要去逐步解决,比如项目是深绿、中绿、浅绿,是翡翠绿,还是祖母绿,孔雀绿,如何采取差异化的管理措施。项目的环境效益如何测算,环境风险、经济风险和社会风险如何评估等一系列的问题,都需要智能化的解决方案去升级改造。 在未来,大模型会被引入到更多的业务环节中,这将会带来哪些变革,我们拭目以待。