VisionMind·大客流管理系统

上海闪马智能科技有限公司

（一）建设背景

视频正成为人类最直接、最主要的交互方式，数以亿计的摄像头和手机都在实时记录着发生在社会中的每件事情，然而每日产生的视频数据利用率仅不足1%。近年来，由于城市人口的增长、旅游业的迅猛发展等原因，城市安全管理的供需矛盾逐渐突出，对城市安全管理提出了更高的要求。

闪马智能“VisionMind 大客流管理系统”，针对上诉难题，对监控视频内容进行智能化研判，及时识别客流过密、人群异动等异常情况，助力城市安全管理，实现警力的精细化投放和布置，让城市管理者做到感知千里、运筹帷幄。

目前，该系统已部署在上海海昌海洋公园，闪马智能提供了精度超过95%的客流计数算法，对客流量精确计数，所见即所得，合理部署警力，灵活调整风控预案，确保人群安全和活动有序进行；并且系统可以基于任务，打造日常管理和大保管理两套模式，针对性的调整参数和事件内容，帮助用户随需应变。

（二）场景痛点

海昌海洋公园主要面临日常与重大节日大客流管控的难题。具体场景痛点包括：

1．节假日期间日客流量超3万，客流秩序管理要求高。

2．需要实时根据当前流量对各个进出口及周边采取相应对管理措施，疏导客流。

3．针对拉横幅事件、人群聚集事件、翻越围栏事件等，精准及时的感知与处置存在较大应用困难。

（三）建设内容

针对城市政治核心区域和客流密集的景观区域，闪马智能“VisionMind 大客流管理系统”实现了对公共场所、大型活动等事件多发区域的客流风险洞察，对客流量进行实时精准计算，对人群突然聚集、突然散开、拉横幅、打架斗殴、逆行、翻越围栏等10余类异常事件进行智能识别，满足城市大规模高密度的客流监控分析需求，帮助城市管理者合理配置安保资源和适时启动应急预案，助力城市管理者守护一方安全。

1.系统架构

闪马智能“VisionMind 大客流管理系统”的系统架构与网络部署架构如下图1、图2和图3所示。

图1 系统架构图

图2 网络部署架构图-单中心

图3 网络部署架构图-分布式

（1）前端接入层

视频管理系统（VMS）是前端感知设备的接入、配置、管理与视频流使用的视频管理平台。前端感知设备的接入、配置与管理平台。可接入国标GB28181设备等主设备，主设备节点下可支持SDK、实时流、ONVIF三种模式，实现视频流、不同厂商的视频设备、录像回放等数据接入。

（2）基础支撑层

系统架构考虑大规模视频输入时的存储和计算需求，可跨平台资源配置、跨网部署，保障数据安全和隐私保护。系统支持智能分析引擎实例的动态调度和生命周期管理，支持数据的融合和集中研判，提供设备管理和监测以及统一指挥及调度平台等功能。

分布式平台层负责对于上层应用提供跨部署单元的计算和存储资源的冗余和调度，可隐藏下层故障恢复和数据冗余等细节，通过弹性调度，合理利用物理资源，从而将一个部署单元组一个“超级计算机”。

（3）AI分析引擎层

AI分析引擎包含通用算法服务和应用模型仓库。其中通用算法服务是指利用经典的计算机视觉技术来完成图像的识别，包含目标检测、人体检测、人体跟踪、行为识别、视频分类等，应用模型仓库则包含了基于特定业务场景定制优化的算法模型，主要由基于单个或者多个通用算法组合并通过特定业务数据训练得到。利用这些模型可以直接完成特定场景的异常事件的检测和识别，并通过API接口上报给业务平台层，提供预警显示及推送服务。

（4）应用平台层

用户通过Web直接检索查看预警识别结果，并可进行人工二次审核验证，将确认影响安全的事件转入到处置流程。提供Web Service和消息队列2种对接方式，可用于上层开发指挥大屏显示所在地区的违法时空信息，即按照预警类型、预警地点、客流趋势、事件重点对象等多维数据融合分析的结果，实现“智能发现”与“快速处置”的业务闭环，协助城市管理者更好进行资源配置，做到全方位、全时段、全维度的管控，助力守护一方安全。

2.核心功能

（1）区域人数统计，可全局统计区域的实时客流量和历史趋势；客流划线计数，可统计各重要路口双向4通道的客流量；两者结合可帮忙城市管理者全局掌握区域客流、合理调配警力，并在重要路口及时做好客流引导，必要时进行限流措施。

（2）监测人群异常事件，比如打架斗殴、翻越围栏等，帮助城市管理者及时处理异常，避免混乱并进一步造成事故。

（3）实时预警人群长时间聚集、违规拉横幅等可疑事件，帮助城市管理者及时介入、合理引导，并采取必要的疏散措施。

具体场景行为识别情况参见下图4至图6.

图4 翻越护栏行为识别

图5 人群聚集行为识别

图6 拉横幅行为识别

（四）建设成效

1．治理效果

在常态及节假日期间实时监测客流趋势，根据人流量采取不同等管控预案，部署对应限流措施，保障景区客流秩序，并通过利用大数据更精确地掌握和预判人流趋势，提前投入资源保障。

2．社会价值

有效扩大城市管理者的监控能力，帮助实时、准确、高效定位人群事件性质与坐标，实现“智能发现”与“快速处置”的业务闭环。更好进行资源配置，做到全方位、全时段、全维度的管控，保障游客在安全有序对环境中游览景区。