大模型又改变一个行业!解构AIoT巨头大华股份研发体系,技术大进化

头图由AI生成

全连接升级,打造大模型+AIoT的「快车道」。

作者 |  三北
编辑 |  漠影
视觉智能正为AIoT行业带来「新故事」,也对通信连接技术提出「新要求」。当下,视频信息占据了互联网信息超82%,大模型、泛智能的深化应用让视频场景变得更多元复杂,AIoT产业关注的焦点也不再是为摄像机、智慧屏幕、边缘盒子等终端和边缘设备装上「智能大脑」,而是如何让「智能大脑」发挥效果。用于支撑智能业务的底层网络连接系统,正是迫切需要升级的一环。

10月24日,2023大华股份“星河璀璨 万象新生”年度峰会在深圳圆满结束。大华股份中央研究院、未来通信研究院院长邓志吉在会上以《智融升级,视连未来》为主题发表演讲,正式宣布未来通信研究院成立,并发布「3+N」融合连接能力体系,从端、云、网、智、生态全维度布局视觉智能新时代。邓志吉告诉智东西,在传统的视频应用中,连接只需要保证设备在线、数据可连接就行了;但现在,面向大规模视觉物联的大算力、大模型应用,对网络、数据获取提出了更多需求,推动全连接技术实现跨代升级。大模型时代,视觉智能对AIoT产业带来了什么新变化?面向大规模视觉物联的智能应用,又对通信技术提出哪些新需求?对此,大华股份有哪些独特洞察和深远布局?通过对话邓志吉,本文对这些问题进行了深入探讨。
01.视觉智能带来AIoT新故事
驱动未来网络发展


AIoT行业的「新故事」在于视觉智能,视觉智能的进化正驱动未来网络的发展。邓志吉告诉智东西,大模型等新技术已经在改变AIoT行业。在一些涉及较不规则行为和事件的场景、素材缺乏的识别场景、偏动态的复杂场景等,聚焦较强推理能力和泛化性的大模型已经发挥很多作用。大模型会大大提高数据的价值转化率,形成一个远大于原本视频监控市场的数千亿元级别新蓝海。回顾以前的视觉智能,更多是识别性应用。早期的视觉智能难以应对各种碎片化场景,多用于替代人的一些观测性的决策,智能化程度有限。进入大模型阶段,更多的能力承载不是在识别,而是在认知,可以用来解决很多难做的精准判断,行业价值不言而喻。“连接能力重要性此刻已经变得更强。”邓志吉说:“机器决策的自主性增强,要求数据在不同系统间动态交互的时效更强、可靠性更高,它就需要网络体系要有一个新的能力架构。”具体来看,面向大规模视觉物联的智能应用,网络需求至少发生了以下三大变化:1、满足海量和多种类数据连接需求。大规模数据量无需赘述,而大量的视觉内容通过边缘端智能化识别之后,会产生很多结构化的感知数据,比如“读表场景”中不是一个视频传回来,而是表的数值,也要基于视觉网络通路传输,要求连接能力增强。2、需要它算得更快。因为智能化应用很难去建立完整的边缘计算,更多还是云边端协同的分布式算力应用,就需要数据在网络中进行多次转发。多次转发,就会导致数据延迟、丢包重传概率增大,导致数据传输延迟变大。“你不知道给一个结果,它什么时候能算出来,有可能是0.1秒,也有可能是2秒。所以它的波动会导致很多应用无法保证实时性。”邓志吉说。3、要用得更好。这其实是涉及到打破「数据孤岛」的问题。不同网络系统的网络协议是不同的,网络数据格式也不同,需要网络在处理数据时打通他们之间的信息解析力、互联互通性和兼容性。所以,我们需要面向大规模视觉连接的大模型应用,打造所需要的「基础承载网络」。值得一提的是,这里提到的「基础承载网络」,与我们常见的通用ICT网络有所区别。传统网络系统主要的功能是数据传输,对数据内容及数据应用意图的理解是没有的。所以大华股份认为,其需要在ICT的基础设施网络之上,对专用的网络系统做研究。为此,大华股份面向大模型时代对网络的特殊要求,通过创立未来通信研究院,以及构建体系化的全连接能力底座,来支撑未来的大规模视觉下的智能化应用。

▲大华股份中央研究院、未来通信研究院院长邓志吉


02.从全连接到融合连接「3+N」补齐视觉智能落地短板


构建未来智能网络,是推动AI发展的重大需求。“我们要让网络理解数据,让数据跟随网络进行动态地适应。”邓志吉谈及大华股份未来通信研究院的研究重点时说,“以前是适应不同的网络,现在是要跟不同的网络进行融合增强。”适应跟融合最大的区别是什么?邓志吉告诉智东西,流媒体过去的传输模式,对网络的适用性极差。“发一个数据,等网络确认一下,你没有收到就给说一下,或者是超时了,然后就再重发一个。”进入AIoT时代,大华股份推出的感知系统首先能够“适应网络”,简单说,就是去根据对网络的预测来调整收发策略。比如,当发现网络的带宽已经开始下降,系统就会调整发送序列及时发出;如果网络丢包率变高了,这时就不进行重传而是进行纠错,把它恢复。这样就可以让数据传递过程更具有适应能力,让数据对网络有一定的抗性。进入新的视觉智能时代,在适应网络的基础上,我们则需要进一步寻求融合连接。视觉类智能应用对数据传输提出了一些特殊的网络性能要求,邓志吉告诉智东西,大华股份团队在研发过程中发现,它不能按照功能性的开发来作为能力承载,而是需要系统级的云-边-端-网”的协同能力提升,这就是融合连接。比如大华股份重构了交换设备的底层系统平台,以此支持数据在网络中做预处理,交换机能理解传入的数据是什么并进行一些处置,就能避免数据因为网络传递不好而出现大量的丢包、重传等故障。通过这样的融合连接,我们能实现传输速度和算力平台压力纾解。那么如何实现从适应网络到融合增强的跨越?大华股份推出了一个全新的「3+N」能力架构。邓志吉谈道,这是一个承载各种网络基础设施的能力底座。这一能力底座可以用于交换机、网关、边缘计算甚至是摄像机产品,让这些网络基础设施就有很强的视觉适应性和智能增强性。具体来说,「3+N」中的「3」是指3个用于融合连接的重要技术基座:第一大技术底座是“多网融合,一网统管”,让复杂的网络更简单化的管理:第二个技术底座是打造了大华股份专用的网络操作系统;第三是构建了专用的视网融合协议,使云边端网实现贯通互联。「3+N」中的「N」是指N个面向视频视觉智能应用的增强特性。通过在视频领域的多年积累和对视频的深入理解,大华股份构建了N项的视频增强特性,让整个网络系统,在传递视频数据的时候更加的高效。2021年,大华股份提出了全感知、全计算、全智能、全连接、全生态“五全”能力战略定位。时隔一年,大华股份对「五全」进行了全新思考,使得“全连接”能力进一步升级为“融合连接”。对于大华股份来说,全感知一直都是其长板,是立身之本。全计算和全智能,是其在发展过程中很重要的能力增强的地方,是主要投入点。全连接的升级,其实是随着智能和计算的发展而提出来的,这个就是新的要求,大华股份要在它变成短板之前就把它补上去。邓志吉告诉智东西,随时间变迁,大华股份始终坚持“五全”能力底座,同时具体内容填充发生了变化。“五个碗,以前我装的是米,现在装的是肉,以前是求饱,现在要吃的好。”「五全」的升级是木桶的短板和长板两个效应的并发。
03.布局未来通信:业随网动,网随业优


大华股份未来通信研究院积极布局“融合连接”,是要用最懂视频的网络,让数据连得更多、算得更快、用得更好。按照大华股份的布局,融合连接主要在以下三个层次进行融合:1、业网融合。要让网络理解当前的业务意图。比如当前的业务意图是决策性业务,要时效性,网络传递数据的时候要进行优先级的调度,保证决策数据的优先传输。业务要实时根据网络的动态性调整数据传递的一种策略,从而保证在动态网络当中有确定性的业务延迟,做到“业随网动,网随业优”。2、数网融合。因为我们大部分复杂动态的分布式智能计算,都需要将数据进行不同网络路径的传输,对于网络系统来说造成了很大的数据传送压力,并且因为网络的拥堵网络状态的某一段不好,导致整个网络出现重传,因此在网络当中会出现很大的数据压力。所以我们在网络当中数网融合就是做网络计算,让网络进行标准化的处理。大华股份前段时间发布了很核心的新技术,在网络设备内置了流媒体调度引擎,可以监测网络设备连接的数据到底是不是流媒体的数据,并且根据流媒体数据的持续特征,对连接的视频终端持续调整。3、网网融合。在同一个场景当中,智能化会催生多样化的业务,在同一个场景有不同物理场景的网络同时部署,像对低功耗的大概率用蓝牙,对于低延迟的网络可能选择5G,大带宽的网络可能选择无线,这些不同的网络如何进行统一的管理、统一的部署和统一的运维,在未来的复杂网络当中对工程化实施和极简化管理提出了重大挑战。构建网网融合的统一管理架构,是大华股份在融合连接能力很重要的核心。通过构建融合连接的新能力,可以让业务系统更精简,业务应用更稳定,这就是大华股份最核心的全连接网网融合的能力。沿着融合连接的三大层次,大华股份未来通信研究院主要有三大研究主线:第一条是连接能力研究,主要是面向新的网络类型去构建所需的连接系统。第二条是在数据交换,主要从物理层、数据层和应用层,构建云边端网的一体化交换能力。第三条是研究更前沿的新一代通信技术,比如说通感一体化语义通信等。这块是为了让连接促进整个数字化系统的颠覆式发展,它是螺旋上升的一个关键。邓志吉谈道,在大模型时代做通信研究,大华股份是最懂AIoT数据的团队。“这么多年以来,我们积累了对视频数据和智能化应用的理解,所以对网络传输业务的意图有一定的理解力。在做通信能力构建的时候,我们更能让通信能力适用于业务所需的数据传输要求。所以我们是最懂AIoT数据的连接系统构建厂家。”可以看到,大华股份不仅要做大模型时代的智能感知龙头,还要亲自上阵做大模型时代的「水管工」,促进像水一样的海量数据实现融合连接,打造视觉智能落地的「新管道」。
04.结语:从全连接到融合连接
推动视觉智能加速落地


随着大模型掀起AI新浪潮,作为AI落地一大最佳场景的AIoT领域也有了「新故事」。「新故事」怎么讲,这不仅涉及行业大模型算法的研发,还涉及端、边、网、云、生态等各个维度能力的配合,是一件长板和短板效应并发的事。作为AIoT领域的行业龙头,大华股份从系统全面的视角,更新其“五全”能力底座和五大研究院体系,为大模型落地提供了制度保障。大华股份未来通信研究院通过「3+N」架构打造融合连接的底座能力,有望成为其在视觉智能时代一道新的技术护城河。与此同时,这一领域当下尚且没有更多的技术参考,需要大华股份克服更多未知的挑战。(本文系网易新闻•网易号特色内容激励计划签约账号【智东西】原创内容,未经账号授权,禁止随意转载。)




相关推荐

  • 杭州/北京内推 | 阿里云人工智能平台深度学习团队招聘算法研究实习生
  • ICCV 2023 | 用“自编码器+多模态学习”更有效地解决3D物体可供性问题
  • 百川智能再发新模型,超越Claude2将上下文窗口做到了全球第一
  • 【ICCV2023】开放世界 TTT 的鲁棒性:自训练与动态原型扩展
  • 清华大学《高级机器学习》资料和院士特邀报告(附pdf下载)
  • 老板说我能力不行,怎么办?
  • 32.5K Star开源一款免费,没广告的音乐软件
  • 使用Python类型提示,保持代码整洁,提高可读性
  • 权威赛事、高额奖金,文心一言插件开发邀你来挑战!
  • Jenkins + Docker 一键自动化部署 SpringBoot 应用最精简流程
  • 7个理由:从Java8升级到Java17
  • 基于Transformer和注意力的可解释核苷酸语言模型,用于pegRNA优化设计
  • 像搭乐高一样做数学定理证明题,GPT-3.5证明成功率达新SOTA
  • ChatGPT上新文件分析、自动搜索等功能,初创公司的产品被取代?
  • 苹果文生图大模型亮相:俄罗斯套娃式扩散,支持1024x1024分辨率
  • 图灵奖得主吵起来了,LeCun:Bengio、Hinton等的AI灭绝论是荒谬的
  • 比亚迪今年的薪资。。
  • 生成式AI迫使Stack Overflow裁员28%
  • 雷军谈澎湃OS存储扩容;传字节除夕统一放假;小米14开机画面显示仍基于安卓;大众汽车软件部门计划裁员 2000 人
  • Windows 11 发布两年,仍“远远落后”于 Windows 10