现在智能 AI 视觉分析在工业工厂、园区、仓库、车间等地方应用很广泛了，摄像头不再只是负责录像，而是通过 CV 视觉、语音等算法，对画面中的人员、物体以及行为、语音等进行识别，例如无尘服检测、禁止玩手机、区域闯入、人数统计、安全帽佩戴、人员倒地、越界和离岗等。

从实际项目来看，一套 CV 视觉边缘计算系统邮件上通常包括：POE/IPC 摄像头、核心交换机、NVR、边缘计算盒子或边缘计算网关共同组成。摄像头负责采集视频，网络设备负责传输，NVR 负责录像存储，而 AI 边缘设备主要承担模型推理和行为分析。

典型视觉架构和训练部署

在一个典型的工厂视觉项目中，POE 网络摄像头安装在车间、通道、仓库或者生产区域，通过网线连接交换机。多路视频经过网络汇聚后，一部分进入 NVR 进行存储，另一部分提供给边缘计算设备进行实时 AI 分析。NVR 是网络视频录像机，用于视频管理和存储。算法类型常用有：人体姿态、人员安全规范（无尘服、禁止玩手机、区域闯入、离岗、人数统计）还有安全帽佩戴、入侵、人数统计、违规行为（越界、未戴帽、倒地、离岗等等）

需要注意 AI 视觉算法通常不是拿到边缘盒子以后直接训练，而是先在性能较高的 PC 或者 AI 训练服务器上完成模型训练。开发阶段可以使用 Ubuntu 系统搭建 Anaconda 等开发环境，根据实际项目采集图片或视频数据，对人员、无尘服、手机、口罩、手套等目标进行数据整理和训练。模型训练完成后，再根据边缘设备的硬件平台进行模型转换和部署，最终由边缘计算盒子负责现场实时推理。

目标检测及训练平台

在 CV 视觉项目中，目标检测是很基础很常用的的一类算法。比如常见的 YOLO 目标检测系列，例如 YOLOv5、YOLOv6、YOLOv7、YOLOv8、YOLOv10、YOLOv11 以及 YOLOX、PP-YOLOE 等。定昌基于自研 YOLO 训练量化平台，可以完成从数据集制作、在线标注、模型训练、效果验证到模型量化的一整套流程。

可以将园区出入口、停车道闸、道路监控等实际场景图片直接导入平台，在在线编辑器中完成车牌目标框选和类别标注，再通过旋转、裁剪、翻转、Mosaic 等数据增强方式扩充训练样本。完成数据集后，可直接进行 YOLO 目标检测模型训练，并在平台内查看 Loss、mAP 等训练指标，同时上传测试图片验证实际识别效果。

案例分析

下面以一个洁净车间为案例简要介绍下常见可用视觉算法模型：

1、基础目标检测：YOLOv10/YOLOv8/Yolov11_det /Yolov7/Yolov6/Yolov5/Yolox/Ppyoloe。训练后可识别：无尘服、口罩、手套、手机、人员；检测是否违规携带手机进入洁净车间等。

2、人体姿态判断：Yolov8_pose/Yolov11_ 其它 ( pose ) 等。训练后可识别：低头看手机、肢体动作、摔倒、长时间静止离岗；判断手部动作（是否抬手触碰设备等）。

3、目标分割：Yolov8_seg 等。训练后可识别：在洁净室复杂背景下分割人体轮廓，区分人和设备、玻璃反光，提升越界检测精度。

4、安全帽识别：如果是厂房外围动力站、化学品仓库区域，用来检测安全帽佩戴；洁净车间一般用无尘服，可不用。

5、快速 POC 测试：不用大量标注，直接检索 `cell phone`、`person`，快速验证手机检测效果。

6、多模态辅助校验：Clip，降低误报，例如区分 " 手里拿手机 " 和 " 手里拿晶圆盒 / 工具 "。

定昌边缘计算盒子承载算法

对于部分项目，RK3588 边缘计算盒子平台可以规划接入约 8～16 路 POE 网络摄像头，具体支持路数还需要结合 400 万、800 万像素以及 720P、1080P 视频规格和实际 AI 算法负载进行评估。例如 DC_EN588 RK3588 边缘盒子采用工业宽温宽压 + 光电隔离接口，适合安卓 12 系统下的 AI 视觉算法开发与应用，出厂即开源 AI 算法代码，可二次开发。可支持接入 RK182X 算力卡，扩展 20 TOPS 算力，综合算力 26 TOPS，并提供面向工业项目的接口设计。在实际视觉项目中，可以根据摄像头数量、视频分辨率以及部署的 AI 模型数量，对设备配置和视频路数进行匹配。

接口特性如下：

1、显示接口：1 路 HDMI IN（4K ) ，2 路 HDMI OUT（单路最高支持 8K）。

2、M.2 接口：支持 1 路 M.2 接口，可接入 RK182X 算力卡，也可支持大容量 M.2 NVME 固态硬盘，

3、网络接口：可扩展 4G,5G 通讯模组，标准双千兆以太网。

4、工业接口：9 路 USB（含 1 路 TYPE-C），多达 8 路串口（含 4 路 TTL，2 路 RS232，2 路 RS485），双路 CAN 工业接口，扩展功能极其出色。

5、机身材质：全铝合金 CNC 加工工艺材质，全程低温被动散热。

6、适合开发项目：适合落地 AI 视觉监控设备，智慧工地，智能工厂，交通电力网关等业务应用。

7、工作环境：宽温支持 -45°C~85°C。宽压支持 9V~36V。

8、机身尺寸：尺寸小巧仅：200*135*44mm。

算法及技术支持

在 AI 算法支持方面，定昌电子提供完整的 AI SDK 和算法部署示例 Demo，包括超快检测速度、超高检测精度和超低检测延时的视觉 AI 算法，多种端侧多路 ASR 语音识别、3A 语音降噪和定向拾音 AI 算法的等 48+ 种算法以及多种端侧大模型部署等方案。例如 DeepSeek-R1-Distill、Qwen 系列、MiniCPM、InternVL 等模型均可针对 RK3588 平台进行优化部署。AI SDK 概述：

l AI 算法：包含了多种先进的 AI 算法，适用于不同的应用场景和产品。

l 工具链：提供了完整的开发工具集，便于您从代码编写、调试到产品化的整个过程。

l AI 模型文件：预置了一系列训练好的 AI 模型，可以直接部署或根据需求进一步调整。

l 使用说明文档：详细介绍了如何安装配置 SDK，以及各种 AI 算法的具体使用方法。