TI代理,常备极具竞争力的充足现货
TI官网今日有何新闻? TI新闻头条报导
一种基于DM视频智能分析系统设计8168
(2024年9月16日更新)

0 引言

南皇电子专注于整合中国优质电子TI代理商国内领先的现货资源,提供合理的行业价格、战略备货、快速交付控制TI芯片供应商,轻松满足您的TI芯片采购需求.(http://www.litesemi.com/)

视频智能分析系统是指以数字视频处理技术为核心,在传统视频监控系统上发展起来的新系统,多年来充分利用了高速公路DSP、光电传感器、工业以太网和人工智能的技术成果。除了传统安全监控系统的功能外,视频智能分析系统还具有昼夜监控、不间断检测、智能识别和预警入侵目标、自动异常检测、视频传输、后端回放、误报率低等特殊功能。

传统基于PC 平台安全系统维护成本高,功耗大,一般不具备智能视频分析功能,X86系统处理器实时性不强,使用范围有限。

目前,大多数视频监控系统都是基于DM642 少数平台使用DM6467平台,处理器性能较弱,无法满足今后的高清视频智能分析的需求。TI公司于2011年推出TMS320DM8168 嵌有图像处理器ARM 核和DSP 核,ARM 核为1.2 GHz ARM-Cortex- -A8 RISCMPU,DSP核为1 GHz C674x-VLIW DSP,带有SGX530显示加速器、高清视频协处理器(HDVICP)、高清视频处理子系统(HDVPSS)。

本文采用美国德州仪器(TI)公司图像处理器处理器TMS320DM8168是高清视频智能分析系统的核心,可以智能分析高清视频流,具有检测、识别、跟踪和预警威胁目标的功能,并通过千兆以太网将视频压缩传输到监控后端。高清视频智能分析系统处理器具有较强的操作能力,能够满足多路高清视频的分析处理和编码传输需求,具有较大的实用价值。

本方案从硬件设计和软件设计两个方面详细描述了高清视频智能分析系统的设计过程。

1 由系统硬件组成

高清视频智能分析系统用于现场大面积覆盖监控和目标事件特写监控。A/D转换器、DM由8168处理器、电源转换电路等组成。

12高清视频智能分析系统VDC供电。电源转换电路通过TPS54620 芯片转换成5 V,3.3 V 和1.5 V三路电压,然后转换为功能电路所需的电压。

高清模拟视频信号通过YPbPr接口由高清视频解码器进入系统TVP7002 进行AD 采集,由DM8168 的VIP0口捕获。

处理器DM8168高清视频处理子系统(HDVPSS)视频输入输入接口和视频输出接口,负责视频捕获、显示、缩放和反交错处理。HDMI显示输出接口。

处理器DM高清视频协会处理器8168(HDVICP)来处理H.264,MPEG4,MJPEG编解码。

处理器DM8168的SGX530显示加速器能有效提高视频流显示速度和质量。

处理器DM8168 的DSP 完成高清视频信号的分析和理解,主动提取目标,实现目标跟踪。

处理器DM8168 的ARM 基于内核运行Linux 操作系统的应用程序,主要负责系统的控制、通信以及网络传输等工作,输出报警信号,通过千兆以太网将视频压缩传输给监控后端,本设计的工作流程。

2 系统软件设计

在本设计中,处理器DM在8168双核架构中ARM内核是主处理器,可引导加载DSP内核,预处理后的视频数据通过SysLink传送到DSP内核进行处理。Sys-Link是TI新推出的DSP/BIOS LINK允许处理器内核之间的通信。ARM 内核、DSP 内核、HDVPSS和HDVICP 的通信由SysLink 负责。软件系统架构。

本设计的智能分析算法。智能分析算法由四个模块组成:视频预处理、目标检测与跟踪、目标识别与理解、视频编码压缩。

在实际应用中,由于运动、光照、噪声等原因,通过视频输入接口捕获的原始视频信息量过于复杂。原始视频必须预处理并提取所需信息。捕获原始视频后,由于成像过程中不可避免地会受到各种干扰。在本设计中,预处理原始视频至关重要,尽量减少干扰因素的影响,处理低质量视频,因为很难直接处理测量目标的特征数据库来提取特征。

预处理模块主要包括相机校准、滤波、增强和恢复。在使用相机之前,需要校准其参数,包括相机模型的内外参数。

3 目标测试和分析结果

目标检测和跟踪模块主要从视频图像中提取和判断目标。同时,将目标从背景中分割出来,最终实现对目标的持续稳定跟踪。检测和跟踪目标是实现更复杂识别功能的基础。目标检测与跟踪模块包括背景建模、目标分割、特征模板建立踪模块。目标识别和理解模块内容主要包括目标模型建立、目标分类识别、行为理解、识别和模板更新,是在目标检测和跟踪模块的基础上,进一步研究目标的性质和目标之间的联系,了解视频内容和客观场景。完成目标的锁定后,通过更为深度的分析和理解和采用基于学习机制的识别和理解算法,进一步研究视频中各目标的性质。对目标进行分类识别和行为理解,从而指导和规划行动。

通过目标识别和理解,将分析结果发送到决策模块并发送报警信息。同时,在分析后的视频上叠加标志TI官方代理视频编码后,信息通过以太网传输到监控后端设备。

为了优化系统性能,由ARM内核对DSP精确同步内核、高清视频处理子系统和高清视频协同处理器的工作,确保ARM内核预处理N帧视频N-3帧视频通过千兆以太网发送,DSP 分析中的核心N-1帧视频,HDVICP对N-2帧视频编码压缩,HDVPSS正好采集N 1帧视频。

4 结论

本方案在DM8168 高清视频智能分析系统智能分析系统,构建了较为先进的智能分析软件算法, 介绍了硬件组成、工作流程和软件架构,并详细描述了智能分析算法的组成、实现和优化。目标测试结果表明,高清视频智能分析系统可以实现对复杂场景的昼夜持续监控,具有结构简单、可靠性高、误报率低的特点,满足未来高清视频智能分析的需求,具有广阔的应用前景。

TI公司被热门关注的产品型号
ADS127L11:数据转换器
TI 具有易驱动输入和宽带或低延迟滤波器的 24 位 400kSPS Δ-Σ ADC
MSP430F6778:微控制器 (MCU) 和处理器
TI 具有 7 个 Σ-Δ ADC、LCD、实时时钟、AES、512KB 闪存和 16KB RAM 的多相位计量 SoC
OPA4376-Q1:放大器
TI 具有 E-Trim、低静态电流和低噪声特性且通过汽车级认证的精密运算放大器
TLC5951:电源管理
TI 具有 7 位点校正和 8 位全局亮度控制功能的 24 通道、12 位 PWM LED 驱动器
TPS7A78:电源管理
TI 120mA 智能电容降压型低压降 (LDO) 线性稳压器
TPS7A4001-EP:电源管理
TI 100V 输入电压、50mA 单输出低压降稳压器(增强型产品)
SN6507:隔离
TI 适用于隔离式电源且具有占空比控制功能的低发射 36V 推挽式变压器驱动器
TPS25981:电源管理
TI 具有瞬态过流消隐计时器的 2.7V 至 16V、10A、6mΩ 电子保险丝
CY74FCT821T:逻辑和电压转换
TI 具有三态输出的 10 位总线接口触发器
TPS99000S-Q1:DLP 产品
TI 具有功能安全特性的 DLP 系统管理和照明控制器
SN54AS825A:逻辑和电压转换
TI 具有三态输出的 8 位总线接口触发器
SN74HC7001:逻辑和电压转换
TI 具有施密特触发输入的 4 通道、4 输入、2V 至 6V 与门
MSP430FR4131:微控制器 (MCU) 和处理器
TI 具有 4KB FRAM、0.5KB SRAM、10 位 ADC、LCD、UART/SPI/I2C、红外逻辑和计时器的 16MHz MCU
INA296B:放大器
TI -5-V to 110-V, bidirectional, 1.1-MHz, 5-V/µs, high-precision current sense amplifier
LMK04101:时钟和计时
TI 具有集成式 1430MHz 至 1570MHz VCO 的抖动消除器:3 路输出用于 2VPEC/LVPEC+4 路输出用于 LVCMOS
TPS565208:电源管理
TI 采用 SOT23 封装的 4.5V 至 17V 5A 同步降压稳压器
SN74LVC1G86-EP:逻辑和电压转换
TI 增强型产品单路 2 输入 1.65V 至 5.5V XOR(异或)门
SN74HC00-Q1:逻辑和电压转换
TI 汽车类 4 通道、2 输入、2V 至 6V 与非门
SN74LVC2G32:逻辑和电压转换
TI 2 通道、2 输入、1.65V 至 5.5V 或门
MSP430F5633:微控制器 (MCU) 和处理器
TI 具有 128KB 闪存、16KB SRAM、12 位 ADC、比较器、DMA、UART/SPI/I2C 和 USB 的 20MHz MCU
TI代理|TI中国代理 - 国内领先的TI芯片采购平台
丰富的可销售TI代理库存,专业的销售团队可随时响应您的紧急需求,目标成为有价值的TI代理