李彦宏谈道,四大能力是AI原生应用赖以生存的基础,没有一个构建于原生基础之上的生态,大模型就一文不值。因此,百度要做第一个将所有产品进行重构的公司,推出了基于文心一言重构的百度搜索、GBI、如流、文库、网盘、地图、智舱、营销平台、家庭机器人、学习一体机等十余款AI原生应用。
以百度新搜索为例,现在,打开百度新搜索的界面还保留原来的搜索框,但搜索结果已经完全不同:不是给出一堆信息链接,而是大模型理解生成一个最好的答案,并支持多轮对话,会推荐相关问题,彻底重构搜索体验。值得一提的是,新任小度科技CEO李莹在会上也首次亮相,甩出基于文心的四款AI大模型硬件产品:小度添添家庭机器人、小度青禾学习一体机和新品牌Tiantian Casa系列的两款智能音箱。小度添添家庭机器人集屏幕、音箱、机器人于一体,据称是全球首款大模型家庭智能机器人。
会上,百度首席技术官王海峰解读了文心大模型4.0训练背后的历程,自3月16日文心大模型3.0推出以来,文心大模型四大能力提效背后,其训练算法已累计提效3.6倍,训练稳定性的周均训练有效率超过98%。王海峰称:“接下来,团队仍会加班加点,万卡算力仍会不眠不休地工作。”王海峰还公布了一组文心大模型生态发展的数据:自8月31日文心一言向社会开放以来,文心大模型现在用户规模已经达到4500个,开发者达到了5.4万,场景有4300个,应用达825个,插件达500个。李彦宏公布了500万AI人才培养计划的最新进展,据悉已培养超420万AI人才。李彦宏宣布百度将为社会再培养500万大模型人才。
现在,百度的所有应用和服务都建立在百度智能云之上,同时文心大模型通过百度智能云赋能千行百业。比如面向营销领域,百度今日推出了全球首个AI原生营销平台“百度轻舸”、业界首个AI全栈式数字人直播解决方案“慧播星”,用大模型及AI原生应用重塑营销行业。在文娱体育领域,文心大模型对中国跳水队的AI辅助训练系统进行了全面的升级,国家跳水队来到现场分享,奥运冠军全红婵称AI成了她的“半个教练”。百度集团执行副总裁、百度智能云事业群总裁沈抖宣布,百度智能云千帆平台要打造大模型服务“超级工厂”,目前已纳管了42个国内外主流大模型,服务了超17000家客户。本次,百度智能云推出国内首个AI原生应用商店、大模型全链路生态支持体系等服务,助力企业落地AI大模型应用。AI原生应用的能力是过去的时代所不具备的,正打开无限创新空间。李彦宏说,结合应用场景,基于理解、生成、逻辑推理、记忆这四大能力做应用,才是AI时代的原生应用。
1、理解能力:前后乱序、模糊表达、潜台词也能看懂
当问文心一言:“北京工作的年轻人,想在河北租房,想知道北京申请公积金贷款行不行。”
这个问题实际提问时是前后乱序的表述,大部分人在打电话提问时,不会很严谨,再加上存在一些模糊表述,都需要大模型重新理解,将信息进行组合。
李彦宏谈道,文心一言已经可以对前后乱序表述、模糊意图表达、话语中潜台词进行理解,并在政务、营销领域有广泛应用前景。
2、生成能力:一张图,不到三分钟生成海报、文案、视频
首先“喂”给文心一言一张汽车图片。
文心一言可以根据原始图片按照需求生成两张图片,然后结合长安官网的信息生成一张具备文字和图片的竖版海报。
当给它提出更多要求,如生成更加丰富的广告文案,包括强调的重点、简短标题和描述,文心一言也能结合相关信息生成五条文案,其中不乏“科技之美”、“时代风潮”等流畅、专业的表达。
更进阶一步,文心一言还能根据上述信息生成视频广告,“请结合官网信息和已有的视频内容,生成一个数字人的口播视频,我想投放信息流广告”。最后生成的广告既体现出了这款车的特点,还有数字人口语播报。
从一张图到海报、广告文案、视频广告,文心一言全过程只用了不到三分钟。
百度此前还基于生成功能推出了营销创意平台轻舸,李彦宏称,能做到“一个人就是一支营销队伍”。
3、逻辑推理能力:数学解题步骤清晰,快速提炼知识点
文心一言还能解决辅导功课的问题,例如让它出一道数学题,它给出的问题逻辑清晰,还给出了解题步骤。
当追问到上述解题过程涉及哪些知识点,文心一言进行了提炼,包括圆锥体积公式、统一计量单位等。
李彦宏谈道,大模型的超强逻辑能力,不仅体现在解数学题上,还有地图上的AI向导等等。
4、记忆能力:几千字小说生成后,也能牢记主角人设
李彦宏称,评估大模型智能程度的重要指标之一就是“前面说的话AI能不能记住,前后生成的内容会不会矛盾”。
现场,文心一言写了一篇小说,演示过程中,李彦宏还穿插了多个干扰性问题。
刚开始给出的主题是,“生成一篇武侠小说,主人公是个女侠,情节要跌宕起伏”。
文心一言写的小说中,有故事背景、女主角人物的简单概述,还有故事的开篇、高潮部分与反派进行生死决战,以及最后和盟友合作的全过程。
这个故事已经基本成型,但故事情节有点简单,李彦宏提出了增加角色的需求,“人物关系太简单,只有2个角色,再增加四个角色”。文心一言给出了另外四个角色的设定,他们都有不同的身份和性格。
随后,为了让故事更加跌宕起伏,李彦宏要求文心一言增加主线的故事冲突,更具备可看性。文心一言添加了反转情节。
文心一言还记得刚才的故事情节,将故事和角色进行了呼应,代入到故事大纲中,并添加了一个符合内容的标题。
最后,李彦宏总结道,文心大模型这四大能力并不是单一体现在产品中,是综合运用、相辅相成的。下面他展示了一个综合运用四项能力的案例。
摄像头扫一下患者拿出来的药盒,数字医生就可以讲解药品的禁忌、如何服用、不良反应等各项问题,还能结合用户的个性化需求,确保患者服药的准确性。最后还能将上述内容生成一张图片,方便用户保存。
百度基于灵医大模型推出的灵医Bot,就能帮助患者和医生对话,还有语音、视觉等多模态能力。
四大能力是AI原生应用赖以生存的基础,没有一个构建于原生基础之上的生态,大模型就一文不值。
文心大模型4.0在理解、生成、逻辑、记忆四大能力方面全面提升,其中逻辑提升幅度是理解的3倍,记忆提升幅度是理解的2倍。AI有很多典型能力,这四大能力构成了基础能力,我们常见的问答、代码编写等都是将这四大能力综合应用。 以百度代码编写助手Comate为例,其整体代码产生率已经达到了40%,其中的高频用户的代码采纳率高达60%。现在,百度新增代码中20%是Comate生成,这一数据在持续增长。这样的快速增长效果是怎么达成的?王海峰称,百度通过更大算力、更多数据、更强算法,打造出规模更大、效果更好的大模型。今年3月16日,百度发布了文心一言的基础技术架构,推出文心大模型3.0版本。5月,百度推出文心大模型3.5,在基础模型升级、技术创新知识点增强、逻辑推理增强以及插件机制等方面取得了效果和效率提升。10月17日,百度文心大模型4.0发布,其通过万卡算力、飞桨平台、多维数据、多阶段对齐及可再生训练实现了进一步迭代。 王海峰透露,从3月以来,文心大模型训练算法已累计提效3.6倍,训练稳定性的周均训练有效率超过98%。文心大模型4.0将知识点增强贯穿输入和输出两个环节,让输出结果更准确,效率更高。百度还研制了智能体机制,在强大基础大模型基础上,研制了“系统2”,让机器像人一样可以自主进化,思考过程白盒化。据悉,文心大模型4.0在9月已经可以对外开放,在过去一个月时间效果提升近30%。 8月31日,文心一言向社会开放,至今四十多天的时间,文心大模型现在用户规模已经达到4500个,开发者达到了5.4万,场景有4300个,应用达825个,插件达500个。随着文心大模型持续迭代,其正赋能千行百业。比如在文化和体育领域,百度已与国家图书馆合作,利用文心大模型学习古代方志与家谱数据,帮助全球华人获取更多寻根线索;同时,基于文心一言等百度大模型技术,其对中国跳水队的AI辅助训练系统进行了全面的升级。奥运会五金王、中国国家跳水队教练陈若琳,奥运冠军全红婵、陈芋汐等来到现场分享AI应用体验,文心大模型成了全红婵口中的“半个教练”。5月,李彦宏就提出,百度要做第一个把全部产品重做一遍的公司。用AI的思维做出AI时代的原生应用。
百度将用AI的思维做出AI时代的原生应用,文库、网盘、如流等应用正以全新面目亮相。
现在,百度新搜索的界面还保留原来的搜索框,符合用户的使用习惯,但李彦宏称,搜索结果和过去相比完全不同,实现了极致满足、推荐激发、多轮交互。
极致满足指的是,用户在搜索框输入问题,如“MBTI是什么”,搜索结果不是一堆链接,而是大模型理解相关内容后然后生成答案。
当问到“过去20年各国工业增加值排名”,百度搜索会给出相应的总结、图表。
看到这些答案后,百度搜索还会生成一些用户可能还想关注的问题,点击相应问题也能得到答案,这就是推荐激发。
还有一种情况是,有时用户没有想清楚自己的需求,很难将需求一次性完整表述出来。李彦宏说,这就需要更加新颖、个性化的搜索模式来服务用户,也就是多轮交互。
例如搜索“北京周边登山去哪比较推荐”,新搜索会给出一些周边景点,用户提出更多的需求,如适合亲子游的推荐点,新搜索也会补充需求,给出新的答案。
再次补充提问,“登山徒步需要什么装备”,百度搜索还记得此前用户提问的亲子游,会给出小朋友的登山徒步建议。
李彦宏说,生成式AI和搜索是天作之合。新搜索从简单的搜索框开始,一步步突破搜索的应用范围,扩大了产品的边界。
一上台,沈抖就问了孔子一个问题,科技的尽头在哪里?孔子给出的答案源于“默而知之,学而不厌”的哲学理念。
孔子数字人学习了孔子的哲学思想,是典型的AI原生应用,这需要人工智能和云计算深度结合,这也是百度智能云倡导的云智一体理念。现在百度所有应用和服务都运行在百度智能云之上。
和大模型相关的需求有五种。有些企业只需要高效的算力,有些企业需要调用大模型API,有些企业希望基于大模型做二次开发,有些企业想选择已经开发好的应用,还有企业希望开发自己的大模型应用。
基于此,百度智能云构建了大模型超级工厂,这一工厂目前已经服务了超过17000家客户,帮助不同需求的企业快速找到工具和资源。
针对只有算力需求的客户,千帆平台可以提供极致高效与性价比的异构算力服务。在大模型训练环节,千帆平台可以实现万卡规模集群训练的加速比达到95%,有效训练时间占比达到96%。此外,千帆平台还兼容昆仑芯、昇腾、海光DCU、英伟达、英特尔等国内外主流AI芯片,支持客户以最小的切换成本完成算力适配。
其次,对于想要直接调用已有大模型的客户,千帆平台纳管了42个国内外主流大模型,企业可以快速调用包括文心大模型在内的各种大模型的API,获取大模型能力。对于第三方大模型,千帆平台还针对性地进行了中文增强、性能增强、上下文增强等优化。目前千帆平台已经服务了超过17000家客户,千帆上直接调用大模型API的月活企业数近万家,整个调用量指数级增长。
第三,对于希望基于现有大模型进行二次开发的客户,在健康、法律、政务领域很常见。
千帆平台为大模型的再训练、微调、评估和部署提供全生命周期工具链、41个行业数据集,帮助客户针对自身业务场景快速优化模型效果。
目前,包括邮储银行、度小满等在内的诸多行业头部企业,都正在通过千帆平台提供的工具链服务开发出了贴合业务需求的专属大模型。
第四,在应用层面,一部分企业需要基于大模型服务去开发AI原生应用,此次百度智能云发布了“千帆AI原生应用开发工作台”,能够帮助企业敏捷、高效地进行AI原生应用开发的需求,降低AI原生应用开发门槛。
此前,企业做出企业级AI应用,需要工程设计、定义接口等,那么大模型时代应该如何高效开发应用?
AI原生应用开发工作台将这些模式、工程、流程都呈现到工作台上,提供应用框架和应用组件服务,应用组件服务由AI和基础云两大类组件构成,是对底层服务能力的组件化封装,让每个组件完成一段固定的功能性任务。
其中,“AI组件”包含大语言模型组件,文生图、语音识别等多模态组件。“基础云组件”包含向量数据库、对象存储等传统云服务能力。这都是百度在过去10年逐步积累、沉淀的。
应用框架则是通过将上述这些组件有选择地串联、组合起来,让它们能够比较完整地完成一个特定场景的任务。
目前,千帆平台上提供的检索增强生成(RAG)、智能体(Agent)、生成式商业智能(GBI)就是典型的AI原生应用框架。在每个框架下,百度智能云还提供各类样板间,支撑开发者敏捷、高效地进行AI原生应用开发。
RAG应用框架的应用场景是用户提问到针对性很强的问题,需要企业自己的文档数据来解答。沈抖说,两万字文章、48页内容的操作手册文档,几分钟就可以做成线上小助手,大概几百块钱。后续的每一次提问需要几分钱。
最后,对于希望直接、方便地选购成熟的AI原生应用的客户,百度智能云发布了国内首个AI原生应用商店,帮助AI原生应用的供需双方建立起便捷、可靠的联接通路,不止展示,还是交易平台,大幅提升客户应用选型与采购的效率,为伙伴商家创造更多商机。目前,已经优选了一批应用正式上线。
百度智能云推出了国内首个大模型全链路生态支持体系,为10家综合伙伴、100家应用伙伴、1万家以上的初创企业以及代理伙伴,提供包括千帆社区、AI原生应用孵化、销售商机、市场营销、赋能培训,以及千帆AI原生应用商店等全方位的支持。
1、百度GBI:颠覆传统数据分析,十几天工时缩减到分钟级
李彦宏发布了国内首个生成式商业智能(BI)产品百度GBI。这一产品从三个方面颠覆了传统的数据分析,也就是支持自然语言交互、跨数据库分析和专业知识学习,
此前专业人士需要跨数据库、表格进行复杂操作,才能完成一项报告,李彦宏称,百度GBI能将商业分析师十几天才能完成的数据分析工作缩短到分钟级。
他说:“天下武功,唯快不破,企业竞争,不是大鱼吃小鱼,而是快鱼吃慢鱼,比竞争对手更快决策,很可能你就赢了!”
2、百度如流:化身一键差旅、会议助手,1秒理解1000条信息
AI重构了百度新如流,李彦宏透露,这一应用已经成为百度人离不开的超级助理。如流能对会议进行实时记录,一键生成会议纪要,为1000条信息1秒划重点。
李彦宏举了一个例子,员工有9个工作群、上千条未读信息,基于百度如流就能1秒钟get重点,还智能将阅读重点分为话题讨论、重点关注等几个类别。这其中考验的就是大模型的理解、生成能力。
工作中的另外一件麻烦事就是差旅,AI助理可以帮助用户解决琐碎的事情,全权完成出差行程安排。当用户给出计划出差的时间、拜访的对象,超级助理就可以根据日程信息安排行程,包括会议结束后航班时间、向客户发出会邀等。
和客户见面前,超级助理还可以提供合作背景,这依赖于其和公司的相关应用打通,能给出更详细的数据。超级助理还可以通过理解合作前期资料,预设客户可能提问的问题,给出建议。
李彦宏说,超级助理更像一个真人的助理。三句话,如流就搞定了机酒、洽谈的预定,还有会议资料。
这就是大模型综合能力的运用,将复杂的任务拆解成多个简单应用执行,再合并成最终结果。
3、百度文库:重构最彻底的产品,从内容工具到生产力工具进化
李彦宏说百度新文库是目前百度被AI重构最彻底的产品,百度文库将彻底颠覆办公、创作的场景。
以前做PPT需要查资料、整理资料,现在百度文库中用户一句话就可以启动这些工作,找到几十份资料,并对内容进行润色、排版。
这得益于百度文库此前积累的10亿份文档,基于这些内容,被AI重构的百度文库可以写出更实用、清晰的文档。
此外,百度文库可以把这一文档和收藏的资料相结合,生成PPT框架,美化作图,最后生成一份完整的PPT。李彦宏称,这中间也有多模态能力玩法,包括PPT风格选择、切换等。
同时,大模型还需要了解观点之间的关系是并列还是同属,才能设计出正确的图表。文库在生成PPT的基础上,还能把对应的演讲稿写出来,
李彦宏谈道,百度文库已经革了自己的命,完成从内容工具到生产力工具的进化。基于AI的新功能,百度文库成为生产内容最好的起点。
4、百度网盘:快速提炼43分钟采访精华,用AI重新定义
过去11年,百度网盘为8亿用户提供服务、处理了40000亿文件,每一天都有用户上传超过10亿张图片。
李彦宏称,百度网盘已经完成图形交互界面到自然语言交互界面的转变,增强了多模态交互信息理解的能力,用户可以对图片、视频进行操作。
百度此前推出业界首个个人云智能助理云一朵,能理解视频内容、识别角色、形成上下文记忆。并且,还能定位到视频的某一帧,帮助用户快速了解视频内容。
此外,云一朵能总结摘要,提炼视频中金句,还能播放涉及金句的相关视频。
李彦宏现场演示的视频,选择了OpenAI首席科学家Ilya Sutskever的一段采访视频。云一朵能对这一长达43分钟的采访进行提炼总结,完成多模态信息的高效提取,在很长的访谈内容中,找到精华部分。云一朵用户已经达到2000万。李彦宏说,过去10年,百度定义了什么叫网盘,现在将用AI重新定义新的网盘。
5、百度地图:一句话调用上千API服务接口
百度地图已经发展了18年路程,现在正被AI重构为全球首个AI原生地图产品。
百度地图积累了导航、打车、找代驾、订酒店等功能,过去这些操作很复杂,需要6、7步甚至20步才能完成,现在用户只要说出需求,地图就可以调动几千个API服务接口,快速直达响应。
AI向导可以规划路线、出行方式,包括对用户泛需求的理解、中间聚会地点的选取、多个地点的信息对比以及未来出行的预测。
李彦宏称,重构之后的百度地图,将越用越聪明、越来越懂你。
6、AI正颠覆汽车、工业等诸多线下场景
以上是线上的AI原生应用,大模型也在影响着人们线下的工作、生活,包括汽车的车内空间,大模型和智能座舱进行结合,能让智能座舱逻辑推理、策略规划、内容生成能力,连续对话、声音交织也能满足用户的需求。
同时AI繁荣的原生应用生态,插件能让开发者快速融入到这个生态中,李彦宏称,插件是一种特殊的AI原生应用,门槛最低、最容易上手。
百度推出文心插件开发平台灵境矩阵,包括法律智能助手、简历助手,能增强大模型能力,让其更实用、易用。还有脑图制作、口语练习等场景。
李彦宏说,现在,千帆大模型平台已经成为中国最大、最开放的开发平台,有42个主流大模型,17000家企业在其上开发产业模型和解决方案,覆盖将近500个场景,现在企业客户可以通过千帆申请测试文心4.0的API。
他谈道,中国有丰富的应用场景,中国用户又天然愿意拥抱新技术,有了先进的基础大模型,我们就能构建起一个繁荣的AI生态,共同创造新一轮经济增长。
最后,他谈及人类会不会被AI所取代,他认为AI不会取代人类,还能救人。基于AI的能力,可以10秒钟完成预警,10分钟完成救援。
7、萝卜快跑载客超400万次,AI原生时代到来One More Thing环节,李彦宏说,AI原生应用一定是多模态的,自动驾驶就是视觉大模型重构物理世界的典型应用。
萝卜快跑已经完成超过400万次载客服务,在武汉、重庆、北京、上海等城市落地,未来随着成本更低的自动化驾驶规模化部署等演进,其将越来越接近商业化,也意味着AI原生出行时代到来。
现在数字技术和实体经济融合,大模型技术已经用于在制造、能源、电力、化工、交通等实体产业中,用智能巡检降低安全隐患、用智能调度缩短交付周期、用智能决策提升企业效率、智能信控解决交通拥堵,大模型正成为新型工业化的重要推动力。
李彦宏最后说道,我们即将进入一个AI原生的时代,一个人机通过Prompt交互的时代。
百度移动生态连接着10亿用户和数百万生态伙伴,这也是百度应用层重构的重要战场。何俊杰透露,过去半年,他们基于文心大模型重构了全线应用服务,不是整合是全面重做一遍。
8月底,随着文心一言向公众开放,百度多款应用也开启公测,他们不断更新,一方面让自然语言交互成为主要的人机交互方式,另一方面基于用户需求,持续扩展传统应用能力边界,让AI生产力更积极,更具有辨别意义。
大模型重新打开了百度文库的想象空间,从文档共享平台转变为一站式智能文档创作平台。
百度文库用一句简单的Prompt,用户就可以通过行业报告了解市场现状,辅助业务做决策,在文档助手中输入你想了解什么行业,文档助手就可以总结框架内容,并附上参考原文答案位置。
此外,还可以根据内容一键生成PPT,PPT里还能根据报告中的重点数据生成图表。
何俊杰说,生成式AI的爆发,让解放大脑和解放双手成为可能。截至目前,百度文库新能力累计使用用户超1300万人,累计功能使用次数破1亿次。
他补充说,生态上,百度将持续深耕,大模型始于技术、强于应用,最终必将惠于生态,这不只是AI公司的独角戏,是人人可用的普惠机会。
还有百度APP,也已经被重构。现在,每个人都有大模型AI助理,使得创作门槛降低,百度APP能通过AI编辑器功能识别图片、说图解画等,小白也能完成AI创作。
推动AI为创作者生态赋能,百度此前发布的AI创作六大件有45万创作者生成了1400万条内容。
百度营销基础平台轻舸是全球首个AI原生应用营销平台,2分钟可以生成100条文案、5分钟生成一条收藏视频,轻舸整体企业覆盖数超过400家。
百度通过文心一言,AI原生应用、内容生态、商业生态打造了非常肥沃的大模型土壤。今年9月,百度发布了文心一言插件生产平台,从技术、流量、变现上为开发者提供支持。
目前,百度的500万AI人才培养计划已经培养了420万AI人才,百度将启动星河计划,再培养500万大模型人才。一个多月时间内,大量开发者创造了丰富的应用,AI助手百宝箱中的插件包括乘机助手、阅读助手、知识脑图助手等。
截至目前,百度已经收到2.7万开发者注册申请,覆盖20多个垂直领域。
百度慧播星平台是业界首个具备全栈式直播间生成的产品,没有直播能源的中小商家,也可以用几个操作生成数字主播形象,完成AI脚本、语音生成等。今天,百度启动了千村万户直播计划,未来5年帮助2000个农村、10万个农民通过数字人进行直播。
百度集团副总裁、小度科技CEO李莹宣布,小度今天推出四款AI原生新产品:小度添添家庭机器人、小度青禾学习一体机和Tiantian Casa的两款智能音箱。
李莹称,小度已经走进了超过4000万个家庭,为上亿用户提供了智能化服务。随着文心一言接入小度,更多AI原生新物种已经诞生。
1、小度添添:全球首款大模型家庭智能机器人
首先第一款是全球首款大模型家庭智能机器人小度添添家庭机器人,基于文心一言能力打造。
小度添添家庭机器人具有超级陪伴、贴心管家、超级助理、百变搭档、看护帮手、娱乐助手等多种功能,在互动中会给人以拥有人格和生命力的感觉,能基于生活习惯和心情为用户营造需要的家居环境。
机器人、平板、音箱形态的变换可以兼顾生活、娱乐和工作等多种需求。
小度添添家庭机器人将于2024年春季上市,目前已在小度商城开启预售。
2、小度青禾学习一体机:一对一家庭教师
面向教育领域,小度基于文心一言推出了小度青禾原生学习一体机。
小度青禾学习一体机致力成为每一个孩子一对一的家庭老师,具备AI个性化诊断、AI个性化学习路径规划和AI个性化教学等功能。小度青禾原生学习一体机采用17英寸/24英寸4K屏幕,搭载八核AI学习芯片,标配键盘鼠标等配件,内置清北名师等高斯课免费学及其他海内外学习资源和应用。
24英寸的小度青禾学习一体机计划2024年夏季发布,17英寸的小度青禾学习一体机 X30现在已上市。
3、Tiantian Casa系列:两款全新设计的AI大模型智能音箱
面向生活美学打造和品质提升方面,小度推出Tiantian Casa系列智能音箱。
Tiantian Casa系列目前包括Aria和Peninsula两款产品,两款产品的设计精美,简约而又科技感能够与各种各样的家居风格融合。同时它们在生大模型能力和智能交互方面,都追求极致的表现。