「装备大模型化」落地破圈!AI技术的一次自证与他证

智东西 2024-10-22 19:17:42

作者 | 三北

编辑 | 漠影

狂飙500多天后,国内的“百模大战”正进入落地验证期。当下,行业和产业对大模型的期待,正从“你家大模型有多强?”变为“你的大模型能帮我干什么?”。

10月22日-10月25日,2024中国国际社会公共安全产品博览会(简称:2024安博会)在北京举办。作为多年来AI产业发展的一大风向标,这场盛会被产业人士寄托的使命之一正是回答上述问题。而这,也是AIoT头部企业宇视科技在做的事。

今年安博会上,宇视科技的展台成为人气最高展台之一。通过五大展区近百个展出单元,宇视亮出了AI大模型落地的实战成果和作战图谱。

g

▲宇视展台现场人头攒动

像百度搜索一样检索视频内容的“万物搜”、夜视能力倍增的AI-ISP猎光系列夜视摄像机、能跟用户互动的AI体育锻炼屏、助智慧城市治理降本增效的大模型方案……今年宇视已不限于大模型相关部件产品展示,而是实现从软件、装备到行业方案全覆盖。

2023年5月,宇视推出AIoT行业大模型“梧桐”,今年4月升级为“梧桐2.0”版本,多模态及推理能力进一步升级,目前已经衍生和优化了上千种相关AI算法,落地城市、交通、文娱、教育等超十个行业。

▲宇视展台现场展出的梧桐2.0架构图

当下,AI亟需完成一次新的价值自证和他证。To C消费类AI大模型产品的流量高峰已被瓜分一波,第二波机会来到了与实体经济息息相关的To B数字化转型市场。

透过宇视科技本次安博会的展出,回溯其在数字化转型中的“探模”之路,我们可以看到,大模型的底座价值正如何一步步潜入千行百业,转化为新质生产力。

一、智能升级:基于梧桐2.0的“万物搜”来了

今年安博会,要说最引人关注的AI大模型新应用是什么?

可能不是各家都在做的智能聊天机器人,也不是爆火的AI视频生成工具,而是这款名为“万物搜”的视频搜索“神器”。

在宇视中心区域展区,一块大屏幕前,围满了视频数据服务系统“万物搜”的体验者。他们只需要输入文字描述,就能从现场实时视频内容中,快速检索出贴近意图的结果。比如搜索“拉行李箱的人”,“万物搜”就会立刻识别并输出对应的结果。

▲“万物搜”被许多观众围观体验

即便是一些十分小众的情况,“万物搜”也可以通过深度解析和语义理解,搜索到用户所需内容。比如搜索“带狗头头套的人”这样语义更具体的描述,“万物搜”也能准确地识别并找到。

▲“万物搜”现场体验

当输入“一个举着手机拍照的年轻男士”这种多个任意元素组合的提示词,“万物搜”也能立刻识别出来贴合表述的视频内容。

▲“万物搜”现场体验

这一应用具有很强的应用价值,比如可用于失物招领。在一个智慧园区场景,某业主购买了一份麦当劳外卖丢失了,他只需要借助“万物搜”去搜索“拿麦当劳外卖的人”,就可以查询到相关的视频记录,从而寻回失物。

宇视相关负责人郑勇告诉智东西,“万物搜”基于多模态大模型算法开发。相比于传统小模型时代的CV识别车牌、衣着等部分有限特征,“万物搜”的搜索对象的边界得到了极大扩展,从而使行业价值也得到大幅提升。

究其背后主要的技术难点,还是多模态融合。

据悉,“万物搜”基于宇视自研行业大模型“梧桐2.0”,融合自然语言处理、视频特征提取和语音识别多种能力,深度理解分析输入文本、语音或图片,及其上下文语境关系,从而让用户可以准确搜索到所需的大部分视频内容。

“梧桐2.0”是一个覆盖了图像编解码、计算机视觉、自然语言处理、多模态等多个领域的AIoT行业大模型。根据宇视官方数据,其已经基于“梧桐2.0”大模型面向十个行业推出了近千种长尾算法。与此同时,其在这十大行业“梧桐2.0”均已有产品出货和项目实际落地。

“从业者会有一个很直观的感受,越来越多的长尾算法的需求都能得到响应,行业对于视频能力的期待也因大模型提高了。”郑勇说。

可以看到,AI大模型已经催生了一大批智能功能和行业算法,呈现出落地可用的效果。

而这,只是AI价值自证的一个开始。这些智能功能还需要在城市管理、交通治理、园区运营等各行各业的场景中广泛应用,才能真正发挥出行业价值。

二、装备进化:把大模型“塞进”摄像机

在大模型进入行业之前,有一个重要中间环节不容忽略,那就是“装备大模型化”。

当下,我们看到微软正在将大模型“塞进”电脑,华为、苹果等手机厂商正将大模型“塞进”手机。而以宇视为代表的AIoT头部企业,也正将大模型“塞进”摄像机。

大模型正催生新的装备进化——本次,在宇视展台上备受关注的AI-ISP猎光系列智能摄像机就是一大代表。基于大模型打造的“猎光2.0-AI-ISP”图像引擎,可以使得前端摄像机应对多种极黑、无光、微光场景挑战。

在现场设置的暗室中,一台仅仅数百元的经济型摄像机,即使是在低至令人难以置信的≤0.0001 Lux的照度环境下,依然能够让图像呈现出如同在白昼中一般的鲜艳色彩。

▲AI-ISP猎光系列智能摄像机效果展示

大模型+智能摄像机设备,让过去AIoT行业难以解决的痛点迎刃而解。

众所周知,夜间是安全隐患的高发时段。由于光线不足,人类视觉难以清晰地观察到周围的环境,往往使得安全隐患难以察觉,星光等夜视摄像机的出现大大缓解了这一问题。但具有高品质成像效果的传统夜视摄像机成本较高,在方案部署的时候容易被战略性舍弃。

缺少高性价比的夜视摄像机,这是行业的一大痛点。

宇视AI-ISP猎光系列智能摄像机直击这一痛点。郑勇告诉智东西,基于“梧桐2.0”,摄像机算法在训练的过程中,可以采用由AI生成的大量不同场景的视频素材,例如微光的鱼塘、无光的乡村小路等,从而大大压缩了训练成本。

同时,基于数千种场景的实验训练及测试,AI-ISP猎光系列智能摄像机算法快速迭代,强化拖影收敛、动态降噪、场景提亮、色彩还原、对比度增强效果,使图像质量突破传统ISP极限。

可以看到,大模型已经展现出对装备“点石成金”的效果。

而这只是“装备大模型化”众多例子中的一个。

今年4月,宇视提出“把所有装备用大模型重做一遍”的理念,随即推出了一大批“装备大模型化”产品,覆盖了AI端侧装备、AI边缘端装备、AI边缘域装备全业务场景。

在这三大场景中,除了AI-ISP猎光系列智能摄像机,大模型改造的设备还涉及AI体测一体机、室内AI体锻屏、视频智能推训一体机、视频数据服务一体机等多种硬件,都实现了不同程度的数倍效果提升。

▲猎光2.0家族

做“装备大模型化”的难点是什么?

郑勇告诉智东西,不同于手机、PC等设备大模型化,AIoT设备在属于相对弱交互但高专业度的领域,这就需要在大模型、AIoT及行业中都有深耕的业务团队来进行支持开发,这也成为宇视做这件事的一大优势。

宇视正通过软件硬件化、硬件装备化、装备序列化等一系列创新研发,为全行业带来“装备大模型化”产品底座开放能力的质变。

当下,无论是面向消费者市场还是企业级市场,装备大模型化已经成为行业发展的必然趋势。

而从企业级数字化转型市场来看,我国ICT装备门类众多、产品强大而丰富。这些装备更是大模型落地的重要载体,是大模型落地实体物理世界、释放千行百业新质生产力的重要抓手。

三、行业破圈:AI技术的一次自证与他证

大模型带来了智能功能和装备的进化,最终的效果还要在行业中验证。

作为一家AIoT产品方案及能力提供商,宇视在视图领域有着多年的沉淀积累,致力于在智慧城市、交通、电力、企业园区等多个场景领域进行视图价值赋能。如今这些行业经验,也正帮助其大模型加速在行业落地。

在本次安博会上,我们可以看到基于“梧桐2.0”的智能功能、装备已经落地到了文体娱乐、智慧城市、智慧交通、生态保护等各个领域。

以宇视在现场展示的AI体育方案为例,基于梧桐大模型的AI体育锻炼屏可以让很多人站在同一个屏幕前一起做运动,记录他们的动作细节和成绩,为其自动打分并提供锻炼建议。这不仅可以帮助校园开展运动、教学,也为社区锻炼等更多场景提供了可能性。

▲AI体育解决方案展示

郑勇透露,自梧桐大模型推出以来,宇视科技发力文教体领域,推出了AI体锻屏、AI跑步屏、AI足球、旅拍兔VLOG、VR导游产品等多个创新解决方案,已快速落地全国百余个城市。

在刚刚结束的“2024吴钩足球全国总决赛”中,直播正是由宇视的AI全景相机进行智能导播。在支持多视频拼接画面自动矫正消除画面畸变的同时,其基于AI画面矫正及运镜算法,让摄像机进行自动检测控球权、自动运镜跟踪,从而让AI像人一样去进行精彩赛事直播。

基于宇视“梧桐2.0”打造的解决方案,也同时落地到了智慧城市治理、智慧人行、智慧车行、动物保护等各个领域。

在某地的智慧城市治理中,相关部门应用了基于“梧桐2.0”的城市解决方案,聚焦群众关注的民生问题比如广场舞噪音管理、社区及城市的卫生管理等问题,使其得到高效解决,12345投诉量下降60%。

在这类场景中,各种细碎的问题都可以找到个性化长尾算法,比如:噪音传感器加视频联动,解决工地超时施工扰民难题;物联网油箱盖加车载摄像机,解决危险驾驶隐患和油耗异常等。这些行业解决方案,都不同程度地助力提升管理效率,减少安全隐患。

大模型为各个行业的数字化转型带来了真实价值,也为各个行业的从业者带来更多机会和商机。

这不仅是宇视AI技术的一次自证,也是其与集成商、渠道商伙伴开启的一次他证。

在去年6月的北京安博会现场,宇视启动了梧桐大模型种子合作伙伴计划,与来自交通、教育、零售、体育公共服务等领域的多位伙伴合作开启共创。

宇视提供软件技术赋能平台,推出了集数据管理、模型管理、服务管理、快捷工具于一体的行业大模型生态服务平台;行业伙伴基于宇视平台和协助,进行解决方案的开发和推广。

时隔一年多,郑勇告诉智东西,一些合作比较深入的伙伴已经能够收益。他们通过宇视推训一体机去训练行业自有模型,将产品和方案销售给同行或终端用户,还能进行二次收益。

可以看到,当集成商、渠道商从“搬箱子”的人变为智能化方案咨询服务商,与上游设备商的关系由买卖变为培育和共创关系,AI技术的自证与他证也正在接近完成时。

生态赋能是一个长期过程。当下,仍然有一些生态伙伴抱有惯性思维,希望买回一台机器就拥有了大模型能力,因此在初始阶段存在开发上手难的问题。对此,宇视会直接跟进和协助伙伴项目,保障项目看到效果;同时打磨设备,以开发出让伙伴更易上手的平台工具。

可以预测,AI大模型带来的将是整个行业数字化生态的变革。AIoT硬件市场或许会进一步向头部集中,但算法、软件、解决方案的能力将更多向集成商、渠道商靠近,从而形成新的行业秩序。

结语:宇视之路,AIoT行业之变

当全球大模型技术产业竞赛加剧,中国企业与大模型技术,正以更快的速度和千行百业搭起桥梁,落地见效。宇视科技围绕“装备大模型化”的探索之路,也正印证了中国AIoT行业之变。

独行快,众行远。装备大模型化及产业落地前景远大,但道阻且长,这是一条必须有伙伴同行的路。我们看到,产业链上的不少玩家已经在转换角色和思路,融入全新的生态共融秩序。AI技术的自证与他证仍在进行中,宇视和他的伙伴们将一起合力推动新业态的形成。

1 阅读:5