人工智能就是新质生产力！两山智联™视频智能系统v2.0（大模型版）发布

时间：2024-04-16 09:20

来源：中国水网

作者：赵利伟整理

这款产品是基于百度AI专为环境集团打造的视频智能管理和技能共创生态产品，旨在通过与百度等AI大厂、环境集团、装备制造企业和智能化公司的紧密合作，构建以环境人为主导的智能生态共创体系。该系统专为环境行业定制，可以激活企业的摄像头管理价值，解决当前视频监控系统中普遍存在的数据过载、管理效率低下等问题。

盘活视频资产，引入视频智能系统是最好的解决方案

环境企业为了减少监控的盲点，为了拓展管理视角，安装了很多摄像头，对大多数厂区和生产区域实现7×24小时不断的监视，随之而来的问题就是，视频看不过来也管不过来，让管理人员淹没在海量视频数据中，各种预警不能及时有效动态感知，也不能对各种突发事件做到及时有效的处理，导致整个视频系统的价值大打折扣。

充分利旧，盘活企业的视频资产，引入视频智能是一个见效快、性价比高的最好解决方案。视频智能系统应用到环境行业也面临了若干问题，两山智联TM视频智能系统能够同时解决这些痛点问题，真正激活所布置摄像头的管理作用。针对环境行业各类场景、基于智能生态共创体系不断开发、分享环境行业专业的安全、工艺、运营等模型，助力环境集团提高运营管理效率。

两山智联™视频智能系统是在原先百度视频分析一体机的基础上，根据环境行业特点采用“1+5”的方案进行设计。其中,1是视频分析一体机，它是部署在厂区的软硬件一体的系统，5是两山智联™视频智能系统的五个典型功能：在一体机上部署的视频智能系统拥有丰富AI模型的边缘平台；在边缘平台和云平台上有可视化数据驾驶舱；为了形成管理闭环，与边缘平台匹配的微信小程序，可以把不同预警事项分级推送指定人员进行查看和处理；云端有两个平台，集团单位可部署中心云平台，对每个厂区的视频一体机进行远程纳管和模型技能的下发；行业云平台，可以支持环境行业开发者的共创和有价共享。大模型的发展是大势所趋。

大模型首先在自然语言处理领域取得突破，如ChatGPT和百度文心一言，引领通用人工智能发展。大模型通过大数据、大算力和强算法提升通用性和泛化性，让人工智能从以往的专业小模型为主的场景训练迈入到以通用大模型预训练为主的新的工业化时代，开启了人工智能新纪元。相比之下，视频小模型在边缘一体机上虽有及时性、分析效率高的优势，但面临场景单一、准确率低和分析推理能力弱等问题。E20率先将大模型应用于环境行业视频智能领域，利用大模型的理解、生成和推理能力，成功推出四个典型功能。2.0大模型版可应用于供水、污水、垃圾焚烧和固废园区的安全、工艺、运营和设备管控全场景，这些应用的落地需要整个行业携手努力，胡军表示，希望2.0版本的发布让我们行业的生态体系加速落地。

2.0版发布四大核心功能，加速视频智能系统在环境行业的广泛应用

两山智联™视频智能系统V2.0版的体系架构如下，它是一个云边协同的智能管控体系，在边端，小模型一体机赋予摄像头、巡检机器人、无人机等快速发现与处置事件的能力。在云端，结合大模型技术，提升整个视频智能系统的效能，构建开放、共享、共赢的体系。大模型平台分为集团中心云平台与行业云平台。集团中心云平台负责一体机远程管理、警情收集与模型下发；行业云平台则共享大小模型的工具箱，支持行业模型共创与模型共享。

两山智联™视频智能系统V2.0功能丰富，包括1.0的小程序、数据驾驶舱和各种功能中心。此次重点结合大模型技术，发布四大创新功能。

微信图片_20240416092208.png

四大核心功能：

大模型复判：小模型在预警方面存在难以提高准确率的局限性，特别是在明火预警等场景下难以达到高识别率。为了克服这一难点，需结合云端协同的大模型，将小模型的预警信息传输至大模型进行拟人化理解和复判，以形成更准确的预警结果。

大模型语义生成技能：在1.0版本中，技能编排需要依赖原子模型，通过拖拽等方式进行编排，并需要手工配置到摄像头，激活以后才能使用；而在2.0时代，只需通过自然语言或提示词即可生成场景图片并直接上线运行，实现了更便捷的技能生成和应用。

大模型生成小模型：传统模型开发需收集大量特定场景图像，如火灾场景，需在厂区收集四五百张不同位置、不同天气、不同光线的火灾照片，难度高且耗时。而大模型则可通过语义方式生成各种场景的明火图像，并导入数据集，加速模型上线。此外，大模型还能将以往算法经验分装成产线，提高标注效率。

大模型的自然语言交互智能助手：该功能通过大模型的检索增强生成和智能体技术，实现对各类统计数据和知识手册的即问即答。此外，该功能还能通过智能体开发数字人实现自动调度和下达终端操作，为用户提供了更加便捷、智能的交互体验。

基于“共建、共创、共享”机制，我们最终是要打造一个由环境人自主开发的，具备工具化、平台化、高安全、快迭代和标准化的智能技术创新和模型共创共享的行业云平台。借助百度一见平台强大的开发功能，来开发我们行业里的各种大小模型。胡军呼吁，希望通过此次2.0版本的发布，加速视频智能系统在环境行业的广泛应用，同时携手行业生态伙伴共同创新，智享未来。

编辑：李丹