文章主题:
🌟ChatGPT的崛起确实引发了对传统搜索引擎地位的深度探讨,尽管它在内容搜索上崭露头角,但短期内的颠覆性替代似乎遥不可及。🔍市场格局依旧稳固,ChatGPT与传统搜索引擎将共存,形成未来搜索引擎的新模式——以传统为主,辅以AI智能。🚀谷歌等巨头的AI研发投入预计将大幅增强,以应对这一趋势。ChatGPT以其出色的用户体验显著超越了传统搜索,问题与答案的匹配精度显著提升。然而,它也存在一些挑战:模型数据更新受限,实时性是个难题;单次搜索成本高昂,每条信息的成本高达1.3美分,远超传统搜索引擎。🔍辨别内容真伪的难度也是用户面临的问题。技术的进步有望逐步改善这些问题,比如通过融合传统搜索引擎的方式优化匹配。至于成本问题,硬件成本的降低可能是长期解决方案。🌊ChatGPT带来的变革不仅加速了AI产业的发展,也预示着AI生成内容新时代的到来,整个行业都将经历一场深刻的革新。🔥
▍报告缘起:
🌟ChatGPT的崛起,让“取代传统搜索引擎”的话题热度飙升!🔥2022年11月30日,OpenAI团队的力作ChatGPT震撼登场,仅两个月就收获了超1亿DAU和20万MAU的惊人数据。💬它以对话形式,能应对各种日常问题,记忆力与篇幅显著提升,全面且深入的回应让人眼前一亮。相较于前辈GPT3,ChatGPT展现出了强大的多轮对话处理能力,知识挖掘更深入,回答角度丰富多样。🔍在内容搜索深度方面,其优势明显,引发了业界对这一颠覆性变革的热议。接下来,我们将深入探讨ChatGPT的技术潜力是否足以挑战搜索引擎巨头,以及它将如何重塑市场格局。🔍🚀准备好,让我们一起揭开这个AI未来搜索的新篇章!🏆
🌟ChatGPT引领未来搜索新风尚:通过升级的GPT3.5+人机互动强化学习,它以卓越的精准度重塑了问题到答案的无缝对接。🔍相较于传统搜索引擎,其强大的学习能力和反馈优化让每一次交互都更贴近用户需求,提升搜索体验至全新高度。🏆SEO友好的语言设计和关键词优化,助您内容在海量信息中脱颖而出,轻松实现流量暴涨。
🌟🚀OpenAI’s masterstroke involves fine-tuning a GPT3.5 model with a strategic blend of human feedback and reinforcement learning (RLHF). 🧠✨The journey begins by harnessing the expertise of human annotators, who craft an impressive 12k-15k question-and-answer dataset, serving as the foundation for an initial pre-training phase. 🔍📚Next, a skilled SFT (Super Fine-Tuned) model takes center stage, generating potential responses to fresh queries. These suggestions are then meticulously evaluated by human evaluators, sorting them like jewels in a crown. 👑🏆The rewards from this rigorous process are translated into an advanced reward model (RM), a refined system that measures the quality of each response. 🥳🎯This RM is further honed on a larger dataset, refining SFT through a iterative cycle of refinement and reinforcement, until it reaches its peak prowess. 💪🔥The end result is not just a model, but a sophisticated AI artifact, crafted with meticulous care and human guidance. Ready to revolutionize the way we interact with language. 🚀🌍
🌟经过一系列优化,我们欣喜地看到ChatGPT模型在理解问题与提供精确答案的效能上实现了显著跃升!据Deepmind透露,相较于传统搜索引擎仅仅通过链接指向内容,ChatGPT具备了革命性的能力——它能直接生成针对问题的详尽且高质量的答案,并附带关键信息来源链接(测试版本中这一特性尤为亮眼)。🌟对于开放式问题,ChatGPT更是展现出强大的数据匹配能力,能够生成连贯且全面的答案。在知识密集型和创意领域,ChatGPT提供的搜索体验已然超越了现有的搜索引擎,堪称搜索领域的全新典范!🌐
▍ChatGPT取代传统搜索引擎:中短期可能性较低。
尽管ChatGPT能大幅优化用户的搜索体验,但要取代传统搜索引擎仍然面临几个关键技术瓶颈。
🌟ChatGPT数据更新挑战:实时性难题与技术限制💡面对中英文版本数据更新时间差(2021年英文版对准,2020年中文版),我们深入探究了这背后的技术瓶颈——语言大模型的局限性。ChatGPT的实时数据库更新之路并不平坦,其主要原因在于复杂的标注数据训练模式,使得直接引入新数据变得异常困难。每轮大规模预训练所需的A100显卡资源堪称豪华,预计成本高达百万美元,耗时长达半个月至一个月!🚀相比之下,微调策略虽能快速适应新知识,但可能过度强调权重,导致模型对旧信息的记忆力受损——这被称为“知识遗忘”问题。🔥为确保ChatGPT的卓越性能与持续更新,我们期待技术的进步能迎刃而解,同时优化训练流程以实现更高效、经济的数据同步。🚀
2)数据的真实性仍不足可靠。在大量的测试后我们发现,虽然ChatGPT回答问题的准确性有所提高,但如果提出的问题较为模糊或者本身包含部分错误信息在内,模型有可能以“一本正经”的语气生成完全错误甚至凭空捏造的回答。真假答案的混杂会让用户在需要对专业性问题寻求答案时产生严重的困扰,这也是目前语言类大模型普遍存在的问题。据CSDN微信公众号报道,2022年11月几乎同一时间上线的Meta服务科研领域的语言类大模型Galactica就因为真假答案混杂的问题,测试仅仅3天就被用户投诉下线。
3)模型在线推理端成本高昂。根据模型的现有数据,我们假设每次生成的回答长度平均为50个词,使用8x英伟达A100用于推理的情况下,我们估算ChatGPT每一次生成答案的成本约为1.3美分,约为谷歌搜索引擎每次搜索成本的3倍。如果每天面对数以亿计用户的搜索请求,如此高昂的成本是公司所不能承受的,中短期内完全取代传统搜索引擎在商业模式上无法做到。
▍搜索引擎产品演变:传统搜索引擎为主+大语言模型为辅相结合。
目前ChatGPT的技术路径难以在较短时间内解决搜索成本的问题,因此从分场景限制用量的思路出发,我们认为中短期内ChatGPT可以通过部分技术改进辅助传统搜索引擎实现用户体验大幅提升。
1)考虑到ChatGPT在不同分类问题中的表现情况,限制ChatGPT搜索仅在知识类搜索场景下启用可以有效控制成本。
2)面对时效类问题时,模型自动判断转向传统搜索引擎生成答案,并通过传统搜索引擎的数据返回生成ChatGPT版本的汇总新答案。
3)针对回答真实性问题,加入对答案产生来源的引用注明给用户,让用户可以快速检验回答的可靠性。
总的来看,通过一些小技术的革新(大部分已经出现在了其他大语言模型中,只需要借鉴)就可以让ChatGPT成为一个合格的辅助搜索引擎。不过成本的问题短期内暂时看不到太好的解决方法,这也给了目前的搜索引擎巨头充足的时间以应对Chatgpt会带来的冲击。
搜索巨头如谷歌以及百度均在大语言模型上有深厚的积累,尤其是谷歌拥有与ChatGPT相似的对话类模型Sparrow以及Lamda,其部分技术更是在ChatGPT上有所突破,包括使用了多个RM模型以应对不良信息的产生以及加入了新知识迭代优化的相关思路。预计ChatGPT的成功不会给搜索产业带来颠覆性的新入局者,但会推动谷歌等搜索巨头加快迭代大语言模型辅助传统搜索引擎的新格局。
谷歌在最新一季度的财报电话交流会中表示:“谷歌将在未来几周或几个月正式推出类似ChatGPT基于大语言模型的人工智能。这种人工智能将以搜索伴侣的形式辅助其传统搜索引擎。”不过我们认为大语言模型的加入也会影响到中期谷歌等巨头的搜索业务利润空间。在平均每个用户生成50个单词的假设下,我们预计到2023年如果有10%的搜索结果由大语言模型生成,将会给谷歌每年带来约12亿美元的额外运营成本。
▍风险因素:
AI核心技术发展不及预期风险;科技领域政策监管持续收紧风险;全球宏观经济复苏不及预期风险;宏观经济波动导致欧美企业IT支出不及预期风险;全球云计算市场发展不及预期风险;企业数据泄露、信息安全风险;行业竞争持续加剧风险等。
▍投资策略:
受制于信息更新、回答准确性、算力成本等层面因素的综合约束,ChatGPT中短期内取代传统搜索引擎的概率较低,但料将加速搜索引擎产品演化进程,并在中期形成以传统搜索为主、ChatGPT类模型为辅的新搜索引擎形态,倒逼传统搜索厂商不断加大AI领域投入,同时鉴于目前全球搜索引擎的市场格局,份额较小的微软Bing最有可能率先实验大语言模型的实际应用,谷歌等头部厂商亦将大概率被动跟随。ChatGPT产生的鲶鱼效应,料将推动全球AI产业化进程的全面提速,以及AI生成内容时代的全面到来。
本文源自金融界
AI时代,掌握AI大模型第一手资讯!AI时代不落人后!
免费ChatGPT问答,办公、写作、生活好得力助手!
扫码右边公众号,驾驭AI生产力!