视频融合赋能平台应用产品介绍

大唐聆讯经过数十年努力开发AI视频监控系统产品并做了大小七十多个项目,产品基本提供给集成商做项目,用户在现有的各种品牌摄像头基础上利旧助新,节省成本,用我们边缘视频分析设备还有平台,能达到用户想要实现的功能.功能如发现有人跌倒、陌生人闯入、系统人脸比对、打架、未戴安全帽、未穿工服、抽烟、烟火、玩手机等行为系统会发出声光报警或语音报警大屏还会出现弹窗,负责人手机微信会接到通知,保安人员迅速到达现场处理。

遵循工业互联网体系架构,基于国产NPU AI技术,深度结合安全生产业务场景,精准识别人员违规、设备和环境异常等安全隐患,具备快速感知、实时监测、超前预警、联动处置和系统评估五种新型能力,助力企业实现安全生产的可预测、可管控。

产品核心AI计算部分所用的NPU SOC采用国产芯片,操作系统采用嵌入式Linux所有软件自主研发,不使用开源数据库,并行计算速度和稳定性都可以得到保证。

除了视频AI处理,产品也可以集成人员定位、物联网数据、热成像设备等各种传感器的数据,并对其进行记录、告警处理。

产品架构

系统分为三层架构,配合模型增量训练平台,实现端、边、云抓拍告警管理,图像AI大模型复检、模型增加、优化升级整套系统。

企事业视频智能监控系统,基于工业互联网架构,围绕企业安全生产人、物、环、管四要素,建立快速感知、实时监测、超前预警、联动处置和系统评估五种新型能力。平台以监测预警为核心,实现对人的不安全行为、物的不安全状态、环境的不安全因素的超前预警,并将AI能力与安全管理业务深度融合,以实现安全生产的可预测、可管控。

边缘计算一体机介绍(服务器形态)

边缘一体机用于多路实时视频AI分析场景,比如大型化工厂、工业园区、学校、医院、政府监管平台建设等。

该产品集成2~22个边缘计算服务器单元,最大可以支持352路1080P AI视频分析,和一台低功耗工控主板,更方便在多路AI视频分析场景使用。

产品分为1U(最大96路)、2U(最大128路)、4U(最大352路)四个版本。

边缘一体机用于多路实时视频AI分析场景,比如大型化工厂、工业园区、学校、医院、政府监管平台建设等。

边缘一体机基本配置

最大96路1U版本 低功耗X86工控主机: Intel CPU:J6412芯片组; 内存类型:8G DDR4,双通道最大内存容量32G; 存储类型:512G SSD,可选择其他规格

嵌入式NPU AI计算单元2~6个,自带管理系统: 四核低功耗高性能CPU+NPU; 最大支持6x16路1080P视频解码,AI分析,再编码

最大128路2U版本:低功耗X86工控主机: Intel CPU:J6412芯片组; 内存类型:8G DDR4,双通道最大内存容量32G; 存储类型:512G SSD,可选择其他规格 嵌入式NPU AI计算单元2~8个,自带管理系统: 四核低功耗高性能CPU+NPU; 最大支持6x16路1080P视频解码,AI分析,再编码

最大352路4U版本:X86工控主机: Intel CPU:I5; 内存类型:64G DDR4,双通道最大内存容量128G; 存储类型:1G SSD,可选择其他规格 嵌入式NPU AI计算单元最大22个,自带管理系统: 四核低功耗高性能CPU+NPU; 最大支持22x16路1080P视频解码,AI分析,再编码

分布式

整个系统用分布式架构来实现,边缘端盒子和边缘端计算节点,可以直接接入安全生产全要素数据,包括安全管理业务数据,生产设备数据、摄像头机器人等实时监控数据等;边缘集中管理平台来管理局域网内的各种数据,支持灵活编排的解决某一场景问题的AI技能,赋能给对应的设备、数据,使其完成智能化的升级,最终通过多模态的监测预警、基于智能设备的智能巡检、支持AI隐患排查的双重预防等特色应用,端到端完成安全生产主动预防模式的升级。边缘管理中台支持管理所有在线的边缘盒子和边缘计算节点,可以分级分账号管理,实现安全生产从单点防控到全局联防的转变。增量训练服务器,可以本地化部署在企业侧,实现数据不外泄的情况下不断增加、迭代优化算法,从而使系统具备自我进化升级能力。

部署架构

部署架构一:边缘端推理+中心管理和模型迭代

所有的部署方式,系统都可以自成体系,也可以和第三方平台方便对接。如工地可以带工牌工牌有北斗定位系统.

使用场景

在厂区内安装环境监测物联网设备若干台,实现环境的全面监控。LED实时显示pm2.5、pm10等污染物指数,现场还检测温度、湿度、气压、噪音、风向、

部署架构

部署架构二:边缘侧推理+本地迭代

所有的部署方式,系统都可以自成体系,也可以和第三方平台方便对接。如工地可以带工牌工牌有北斗定位系统.

使用场景

在厂区内安装环境监测物联网设备若干台,实现环境的全面监控。LED实时显示pm2.5、pm10等污染物指数,现场还检测温度、湿度、气压、噪音、风向、

功能概述

安全生产视频智能监控系统通过端、边、云三层管理相结合,主要包含以下功能。

支持多种设备接入:摄像头、声光报警器语音住等;

支持对设备进行统一的分类管理、预警规则配置;

AI盒子接入及管理:AI盒子技能下发、预警信息上报、AI盒子监控;

支持第三方平台对接,帮助用户实现应用统一管理、分布式建设。

提供监测预警等AI应用,利用AI技术多方位助力安全生产管控。

使用场景

在厂区内安装环境监测物联网设备若干台,实现环境的全面监控。LED实时显示pm2.5、pm10等污染物指数,现场还检测温度、湿度、气压、噪音、风向、

监控及预警管理

支持实时监控设备状态及视频画面;

预警事件的详细信息、事件视频及基本信息展示;

完整的预警事件管理及处理;

面向油气、电力、水务、化工、矿山等多个行业提供丰富的场景化AI模型;

支持原子模型编排生成技能,灵活适应业务场景;

支持模型的增量训练和再部署;

支持图像大模型用于报警复检;

AI模型库的扩展与优化

面向油气、电力、水务、化工、矿山等多个行业提供丰富的场景化AI模型; 支持原子模型编排生成技能,灵活适应业务场景; 支持模型的增量训练和再部署; 支持图像大模型用于报警复检;

AI盒子和计算单元的功能

AI盒子或计算单元作为系统的最低一级平台,主要承担基本的抓拍、识别、告警功能,同时它又是一个完整的自管理系统,能够独立使用。

视频接入

模型规则配置

抓拍报警存储

系统配置

模型扩展 系统有足够的内存空间可以添加新的模型。

系统升级 模型添加或优化后,可以方便更新到计算单元中。

本地集中管理平台的功能

本地集中管理平台提供大屏数据看板、工作台、报警管理、实时监控、系统设置等功能。

报警管理模块提供警戒抓拍、结构化抓拍、人脸识别、车辆识别、报警弹窗、大模型复检、大模型应用等功能。

警戒抓拍页面提供根据时间、计算单元、通道、报警类型查询报警情况,处理报警等功能。

结构化抓拍提供人脸、人形、机动车、非机动、车牌各种抓拍目标的检索功能,支持情绪识别,支持人脸以图搜图。

工作台

工作提供整个平台多元的数据展示,用户可直观查看当前的资产情况、预警情况、预警统计、消息通知,可通过工作台快速进入计算单元,支持对每个通道的直接布控设置。同时提供GB28181视频接入配置、AI模型管理、人员档案管理、车辆档案管理等功能。

人脸识别

记录所有抓拍到的人脸,提供检索功能。

报警管理模块提供警戒抓拍、结构化抓拍、人脸识别、车辆识别、报警弹窗、大模型复检、大模型应用等功能。

在本地集中管理平台中内置图像大模型,对报警图片进行复检,以减少误报。

结构化抓拍提供人脸、人形、机动车、非机动、车牌各种抓拍目标的检索功能,支持情绪识别,支持人脸以图搜图。

告警大模型应用

大模型应用支持任意编排告警模型,对计算单元上报的人、车、抓拍等各种图片根据编排的告警规则进行检测,产生告警后记录在数据库,并可以推送到第三方平台。

统计分析

统计分析模块提供可视化查看预警数据的统计数据,基于不同维度的分析直观展示安全运行态势,突出重点问题,提升监管效率,支持不同时间维度的筛选汇总及结果导出。

报警管理模块提供警戒抓拍、结构化抓拍、人脸识别、车辆识别、报警弹窗、大模型复检、大模型应用等功能。

实时监控

实时监控模块是日常生产过程中的监控界面,通过实时监控进行场景监测,支持单屏/多屏切换。同时可以支持AI视频画面,可以查询所有通道的告警录像和图片。

远程AI边缘管理中台

AI边缘管理中台,包括:用户管理、设备管理、视频调度管理,抓拍告警消警管理,AI算法训练、优化部署,云存储等功能

该系统可以管理到我们公司自主研发的所有产品,包括AI摄像机、AI边缘服务器、AI边缘一体机产品。

系统基于互联网技术、分布式部署,可以快速小规模部署管理几十到几百台摄像机设备,也可以大规模部署,管理几千到几万台摄像机设备,可以适合各种不同层级的项目需求。

系统可以完全私有化部署,作为各种不同应用系统的底层支撑平台。

基本功能说明

用户端用于用户自己的设备。/多屏切换。同时可以支持AI视频画面,可以查询所有通道的告警录像和图片。

从应用角度来看,该设备管理中台主要用于管理AI边缘服务器、AI摄像机等设备的接入、远程控制、告警、消警、参数设置、推流等。管理中台又分为用户端和管理端。