跳转到内容

AI + 夜视摄像头解决方案

1. 概要

AI + 夜视摄像头解决方案(评估板 / 套件)

本解决方案的特点:暗光环境下的高画质

  • 低功耗
  • 稳定的长时间 RTSP 流媒体传输
  • 已预装 AI 演示(Ready to use)

应用场景

  • 【养老护理机构】看护监控与跌倒检测
  • 【酒店和住宿设施】安防及服务提升
  • 【办公室和公共空间】基于 AI 的检测与分析

养老护理机构的跌倒检测

养老护理机构的跌倒检测

酒店住宿设施的安防监控

酒店住宿设施的安防监控

办公室公共空间的 AI 检测分析

办公室公共空间的 AI 检测分析

2. 目标用户

  • 个人 DIY、AI 学习
  • 学校实验、教育与培训用途
  • 企业 PoC(概念验证)、工程评估

3. 应用

3.1 低照度环境下的室内监控

低照度环境下的室内监控对比

低照度环境下的室内监控对比

3.2 夜间拍摄

夜间拍摄对比

夜间拍摄对比

3.3 AI 识别(物体检测与行为分析)

AI 识别物体检测行为分析

AI 识别物体检测行为分析

4. 替代方案选择

▶ 入门测试:IMX415 + USB UVC

IMX415 USB UVC 摄像头

IMX415 USB UVC 摄像头

▶ 稳定系统:RV1126 + IMX415 MIPI

RV1126 IMX415 MIPI 评估板

RV1126 IMX415 MIPI 评估板

▶ 性能提升:RK3588S + IMX415 MIPI

RK3588S IMX415 MIPI 评估板 RK3588S IMX415 MIPI 评估板

5. 快速入门指南

💡 注意 : 在本评估板上,图像尺寸、白平衡等参数无法通过命令轻松修改。修改示例程序后需要重新编译。详情请参阅开发手册。如果需要修改参数来进行摄像头评估,请先购买“USB UVC 评估套件”并使用该套件进行评估。

步骤 1:硬件连接

  1. 上电:将电源连接到评估板。
  2. MIPI 连接:连接摄像头。
  3. 网络连接:将评估板的 LAN 端口连接到路由器。
  4. PC 连接:使用 USB 线连接评估板与 PC。

评估板电源连接

评估板电源连接

MIPI 摄像头连接位置

MIPI 摄像头连接位置

FPC 线缆连接方向

FPC 线缆连接方向

LAN 网络连接

LAN 网络连接

USB Type-C PC 连接

USB Type-C PC 连接

注意: 插入 FPC 线缆时,请将蓝色面朝上。

步骤 2:命令操作

  1. 在 PC 上同时按下“WIN+R”键,输入“CMD”并运行。
  2. 输入以下命令访问评估板。
Terminal window
adb shell

启动 Windows CMD

启动 Windows CMD

步骤 3:文件部署与执行

首先,创建一个名为 gst_test.sdp 的文件。

创建 gst_test sdp 文件

创建 gst_test sdp 文件

使用文本编辑器(如记事本)打开该文件,并添加以下内容。

注意: 两处 IP 地址都需要改为用户 PC 的 IP 地址。

v=0
o=- 0 0 IN IP4 192.168.10.111
s=H.264 Stream from RV1126
c=IN IP4 192.168.10.111
t=0 0
m=video 8554 RTP/AVP 96
a=rtpmap:96 H264/90000

使用 adb shell 命令登录【开发板环境】,并输入以下命令。

注意: 请将命令中的 IP 地址改为用户 PC 的 IP 地址。这样会对 video 节点的视频进行编码,并通过 UDP 将其流式传输到 PC 上的 VLC。

Terminal window
gst-launch-1.0 v4l2src device=/dev/video23 ! video/x-raw,framerate=30/1 ! mpph264enc ! h264parse ! rtph264pay config-interval=1 ! queue max-size-buffers=100 leaky=downstream ! udpsink host=192.168.10.111 port=8554 sync=false

执行结果(运行效果)如下:

UDP 流媒体执行结果

UDP 流媒体执行结果

步骤 4:确认视频

  1. 打开 VLC 播放器,并使用 VLC 媒体播放器打开已创建的文件。
  2. 选择并打开 gst_test.sdp,确认视频画面。

在 VLC 中打开文件

在 VLC 中打开文件

在 VLC 中选择 sdp 文件

在 VLC 中选择 sdp 文件

VLC 视频显示结果

VLC 视频显示结果

6. 参数对比

项目省电且稳定(RV1126)高性能且可扩展(RK3588S)备注
夜视功能
接口UARTx2
CAN
I2C
USB2.0
USB3.0x2
PWMx2
SPIx2
GPIOx3
USB2.0x3
USB3.0x2
RS485×2
RS232×2
CAN×2
Mini PCIE
CPU4×ARM Cortex-A53@1.6GHz4×A76 + 4×A55
ISP12M ISP + 8M AI-ISP48MP(2x 24MP)ISP with HDR and 3D NR
MIPI CSI2x4 lanes,2.5Gbps/Lane3x4 lanes,2.5Gbps/Lane
最大功耗5W10W
AI 算力3Tops6Tops
WIFI2.4GHz2.4GHz/5GHz
蓝牙4.04.2
尺寸120mm×90mm56mm×85mm
支持的 OS / SDK(最新)Ubuntu-22.04Debian12-Kernel-6.1,Android14,Ubuntu-24.04提供镜像文件
提供内容RTSP、AI demo、文档、源代码(二进制)RTSP、AI demo、文档、源代码(二进制)

7. 常见问题(FAQ)

Q:可以在 Raspberry Pi(树莓派)上使用吗?

A:我们也另外准备了面向树莓派的 IMX415 模块 / USB UVC 摄像头(与本评估板是不同商品)。

Q:可以长时间连续运行吗?

A:可以。

Q:可以进行基于 AI 的行为识别吗?

A:可以,支持 Resnet50、Yolov5、Yolov8、Yolov11 等。我们准备了以下 AI 识别演示。所提供的演示模型种类可能会更新。

  • 人脸识别(人脸认证)
  • OCR 识别(文字识别)
  • 火焰检测
  • 语音识别
  • 手势识别
  • 人体检测(人物识别)
  • 车辆识别
  • 车牌识别

Q:关于认证与测试

A:EMC 测试:已通过
A:已取得认证:FCC 认证、CE 认证

8. 套件阵容

8.1 评估套件:RTSP + 全套文档(推荐)

摄像头 + 主板 + 文档

评估套件

评估套件

8.2 开发套件:安装 / 显示 / 量产前验证(面向企业)

摄像头 + AI 主板 + 安装支架 + 显示屏

开发套件

开发套件