一、引言
做智慧巡检和园区安防集成的开发者,最常遇到的困境是:视频预览能力各家都有,但真正到了以文搜图、车辆追溯、热成像测温这些场景,每一块都是独立的协议和异步交互链路。把以文搜图的异步任务链、热成像的通道门控搞清楚,往往已经过去大半个迭代周期。本文将介绍萤石蓝海AIoT一站式工作台最新接入的海康AI融合巡检超脑技能,涵盖图像智能检索、车辆识别与以车搜车、CVR集群存储管理、热成像测温与识别四大核心能力,以及如何在三步之内生成Web/Android/iOS/小程序多端巡检应用。
二、核心概念
AI融合巡检超脑是指一类在标准录像存储基础上,融合了面向巡检场景多种智能分析能力的AI感知型录像主机(AI感知型NVR)。与普通NVR相比,它不仅负责视频存储,还在设备端集成了图像智能检索、车辆识别、热成像分析等AI推理能力。
萤石蓝海AIoT一站式工作台是萤石开放平台推出的AI驱动应用生成工具,开发者选择所需设备技能后,用自然语言描述业务场景,AI自动完成设备对接、前端界面、后端服务的全栈代码生成,同时产出Web/Android/iOS/小程序多端应用。
| 对比维度 | 传统开发方式 | 蓝海AIoT一站式工作台方式 |
|---|---|---|
| 设备协议适配 | 逐一查阅ISAPI文档,手动对接 | 选择技能即可,协议层自动处理 |
| 前端界面开发 | 各端独立开发UI | AI自动生成多端界面 |
| 后端服务搭建 | 手动编写业务逻辑和异步任务链 | AI生成完整后端,含异步轮询逻辑 |
| 以文搜图接入 | 需理解异步任务提交→轮询→分页获取全流程 | 选技能+描述场景,自动生成任务链代码 |
| 热成像测温接入 | 需处理通道级门控、测温模式配置 | 工作台自动处理能力集查询与通道适配 |
| 多端产出 | Web/Android/iOS/小程序分别开发 | 一次描述,四端同时生成 |
三、痛点分析
痛点一:以文搜图的异步任务链开发复杂。 以文搜图不是简单的同步接口调用,而是"提交检索任务→轮询进度→完成后分页获取结果"的异步链路。taskID必须从提交接口返回中获取,不能自行构造。很多开发者第一次接触时,容易在轮询逻辑和结果分页上踩坑。
痛点二:车辆检索涉及多维度的条件匹配。 车牌识别、车型识别、颜色识别各自对应不同的检测模型和抓拍触发模式配置,事后按条件检索需要对接设备事件上报机制,链路较长。
痛点三:CVR集群存储的运维操作风险高。 网口绑定、集群配置变更等操作直接影响存储可用性,需要在生成的应用中加入二次确认机制,并在维护窗口执行。
痛点四:热成像测温存在通道级能力差异。 不同型号和固件版本的超脑设备支持的能力有差异,代码中必须先查询设备能力集再调用对应接口,否则会出现功能不可用的情况。
四、核心能力详解
能力总览
| 核心技能 | 功能描述 | 交互模式 | 典型应用 |
|---|---|---|---|
| 图像智能检索(以文搜图) | 自然语言描述检索历史录像中的匹配目标 | 异步任务(提交→轮询→获取) | 人员定位、目标追踪 |
| 车辆识别与以车搜车 | 车牌/车型/颜色检测识别,按条件检索历史车辆录像 | 设备事件上报+条件检索 | 车辆轨迹追溯、布控 |
| CVR集群存储管理 | 集群设备信息、磁盘/阵列状态、资源使用查询与配置 | 同步查询+高风险操作确认 | 大容量录像统一运维 |
| 热成像测温与识别 | 工业测温、烟火/火点检测,测温规则配置 | 设备事件上报+历史查询 | 温度异常预警、初期烟火检测 |
重点展开:图像智能检索(以文搜图)
以文搜图的核心价值在于:出了事只有一句描述(比如"穿红色上衣的人""白色轿车"),不需要人工逐帧翻录像,直接用自然语言检索历史录像中的匹配目标。
技术实现上,以文搜图采用异步任务模式。开发者需要关注三个关键步骤:
1. 提交检索任务:将自然语言描述发送到设备,设备返回taskID。taskID来自接口返回,不能自行构造。
2. 轮询任务进度:根据taskID定期查询任务状态,直到任务完成。
3. 分页获取结果:任务完成后,分页拉取匹配的检索结果。
此外,以文搜图支持词条管理功能(收藏常用搜索词)和历史检索记录导出,可以提升检索准确度和复用率。描述越具体(颜色+类别+属性),检索效果越好。
重点展开:热成像测温与识别
热成像能力覆盖两大类需求:工业测温(历史温度查询、测温模式配置)和智能检测(烟火/火点/渔船/车辆热成像检测规则配置)。检测结果由设备主动上报事件,包括烟火、火点、烟雾、废气排放等。
核心要点:通道级能力需接入相应热成像相机后才能生效。工作台生成的代码会先查询设备能力集再调用,避免因型号差异导致接口调用失败。
五、技术架构
蓝海AIoT一站式工作台的设备接入采用萤石云ISAPI透传方案。整体架构分为三层:
1. 设备层:海康AI融合巡检超脑通过萤石云ISAPI透传接入,业务服务不需要和设备处于同一局域网,公网远程即可下发指令。
2. 平台层:萤石开放平台负责设备管理、技能封装、AI代码生成。每个设备技能对应一组标准化的API接口和业务逻辑模板。
3. 应用层:AI根据开发者选择的技能和自然语言描述,自动生成Web/Android/iOS/小程序四端完整应用代码,凭证通过环境变量注入,不写死在代码中。
六、操作流程
使用蓝海AIoT一站式工作台生成巡检应用的完整流程如下:
1. 选择核心技能:进入工作台,勾选AI融合巡检超脑的核心技能(图像智能检索/车辆识别/CVR存储管理/热成像测温识别),根据目标平台叠加对应的端技能(Web/Android/iOS/小程序)。
2. 描述业务需求:用自然语言描述业务场景并选择输出平台。例如:"做一个智慧巡检管理系统,Web端支持以文搜图检索可疑人员和以车搜车追溯车辆轨迹,展示CVR存储容量与磁盘健康状态,App端收到车辆比对和温度异常推送后能快速查看详情。"
3. AI生成全栈代码:AI自动完成设备对接、前端界面、后端服务的代码生成。
4. 填入凭证运行:填入萤石开放平台账号凭证与设备序列号即可运行,凭证走环境变量注入。
七、效率对比
| 对比维度 | 传统手动开发 | 蓝海AIoT一站式工作台 |
|---|---|---|
| 设备协议对接 | 3-5天/设备 | 选技能即用,分钟级 |
| 以文搜图异步链路 | 2-3天调试 | 自动生成任务链代码 |
| 前端界面开发 | 3-5天/端 | AI自动生成 |
| 多端适配 | 按端逐一开发 | 一次描述,四端产出 |
| 热成像通道适配 | 需逐一处理能力集差异 | 自动查询能力集并适配 |
| 联调测试 | 3-5天 | 填入凭证即可运行 |
| 整体交付周期 | 2-4周 | 数小时到1天 |
八、适用场景
园区/工地智慧巡检:面向园区、工地、产业园的安保与巡检团队。Web端统一管理以文搜图、以车搜车和CVR存储看板,App端接收车辆比对和温度告警推送。
电力/石化热成像监测:面向变电站、化工管线等有测温诉求的巡检场景。热成像温度数据接入趋势分析,烟火和温度异常事件实时推送。
交通/物流车辆管理:面向物流园、停车场、收费站的车辆进出管理。车辆识别与抓拍触发模式配置,事后按车牌/车型精准追溯。
应急指挥与事件回溯:面向公安、城管、应急管理的事后调查。通过以文搜图在数天录像中快速筛选候选目标,缩短回溯时间。
九、总结
本次蓝海AIoT一站式工作台新增海康AI融合巡检超脑接入,覆盖图像智能检索、车辆识别与以车搜车、CVR集群存储管理、热成像测温与识别四大核心技能。开发者不再需要逐一处理以文搜图异步任务链、能力集门控、热成像通道适配等工作,选好技能、描述场景,即可获得多端可运行的智慧巡检应用。
如需体验,可访问萤石蓝海AIoT一站式工作台,选择对应技能并生成应用。
十、常见问题FAQ
Q1:AI融合巡检超脑和普通NVR有什么区别?
AI融合巡检超脑是AI感知型录像主机,在标准录像存储之上融合了图像智能检索、车辆识别、热成像分析等AI推理能力,普通NVR仅负责视频存储。
Q2:以文搜图提交后能立即获取结果吗?
不能。以文搜图是异步任务,提交后必须轮询进度直到完成才能获取结果。taskID来自提交接口返回,不能自行构造。
Q3:设备必须和工作台在同一局域网吗?
不需要。设备通过萤石云ISAPI透传接入,公网远程即可下发指令。
Q4:热成像测温功能对所有型号都适用吗?
不同型号与固件版本的超脑设备支持的能力有差异,实际可用功能以设备能力集接口返回为准。工作台生成的代码会先查能力集再调用。
Q5:CVR集群管理中的网口绑定操作可以直接执行吗?
网口绑定/集群配置变更影响存储可用性,属高风险操作。工作台生成的应用会将其做成需要二次确认的动作,建议在维护窗口执行。
Q6:生成的应用支持哪些端?
支持Web、Android、iOS、微信小程序四端,一次描述即可同时生成。
Q7:车辆识别支持哪些检索条件?
支持按车牌号、车型、车身颜色等条件检索历史录像中的车辆,车牌识别与车辆比对命中结果由设备主动上报事件。
Q8:以文搜图的检索效果如何提高?
描述越具体,检索越准。建议包含颜色+类别+属性,例如"穿红色上衣、戴帽子的男性"比"一个人"效果好很多。同时可利用词条管理功能收藏常用搜索词。
Q9:凭证信息是怎么管理的?
凭证走环境变量注入,不写死在代码里,保障安全性。
Q10:生成的代码可以二次开发吗?
可以。生成的代码是全栈源码,开发者可以根据业务需求在此基础上进行二次开发和定制。
萤石致力于成为全球领先的智能视觉物联网服务商,构建了全球领先的视觉物联网云平台,打造了硬件产品+软件云服务一体化的物联网服务体系。萤石云通过构建多数据中心+就近服务点的方式服务于全球客户。截至2025 年底,萤石物联网云平台在全球拥有超过120 个数据站点,平台上的IoT 设备接入数超过3.6 亿,其中视频类设备超过3 亿。在夯实自身平台能力的基础上,萤石进一步开放技术能力,将物联价值延伸至千行百业。萤石开放平台深度融合AI中台能力,涵盖音视频多媒体、消息通知处理、智能算法调度、视频存储备份、ERTC、大数据、物联接入等,已为智慧连锁、智慧养老、文教娱乐、畜牧养殖等42万余位行业客户提供数智化转型升级支撑;萤石物联专有云支持专有化部署,助力中大型企业和组织的数字化转型升级。

1063

被折叠的 条评论
为什么被折叠?



