本专利针对传统调度指挥中信息传递滞后、现场情况难以实时掌握的问题，提出一种集成音视频服务器与业务集群服务器的智能调度系统。通过音视频实时交互与多终端协同，实现现场信息精准采集、快速传输及可视化调度，提升应急响应与决策效率。系统支持多级指挥权限管理、4G公网对讲及地理轨迹追踪，确保指挥过程高效可控。
现有技术中，对巡查、检修工作的调度指挥，其调度指挥的场景覆盖范围广，里程长，现场情况复杂，单岗作业人员分散，使用传统的通信方式，弊病屡见不鲜(例如盲点多、接通低、范围小、无应急联动)，也无法看到现场实际情况，无法快速响应。
因为无法看到现场的实际情况，调度调度指挥人员无法对现场的情况作出准确的预估和判断，从而导致调度指挥的不准确，巡查、检修工作的协作不顺畅，调度指挥的效率低。
针对现有技术中的缺陷，本发明提供了一种智能调度指挥系统及方法，通过丰富的多媒体交互方式，调度指挥人员与现场的上报人员和作业人员进行音视频通讯，更准确的收集、分析、评估现场情况，从而实现及时响应、精准指挥、快速决策的目的，提高调度指挥的效率。
第一方面，本发明提供了一种基于智能调度指挥系统，包括调度指挥平台、音视频服务器、业务集群服务器、存储服务器和用户终端；所述用户终端包括视频采集终端和被调度终端；
所述音视频服务器分别与存储服务器、调度指挥平台和用户终端通讯，用于建立调度指挥平台和用户终端之间的流媒体连接，实现调度指挥平台和用户终端的音视频通讯，并将音视频通讯过程中的音视频文件存储到存储服务器；
所述业务集群服务器分别与调度指挥平台和用户终端通讯，用于将视频采集终端的上报信息发送给调度指挥平台，将调度指挥平台的调度信息发送给被调度终端，用于实现调度指挥平台和用户终端之间、多个用户终端之间的非音视频的通讯。
优选地，所述音视频服务器包括信令服务单元、音频服务单元、视频服务单元和合成服务单元；
所述信令服务单元，用于建立用户终端和调度指挥平台之间的流媒体连接并且维持连接的稳定和监控连接的状态；
所述合成服务单元，用于将处理后的音频数据和处理后的视频数据通过计算和优化，整合成为一个完整的音视频文件。
优选地，所述调度指挥平台包括集群对讲单元、实时视频单元、巡线定位单元、报警管理单元、内容管理单元和系统管理单元；
所述系统管理单元，用于设置系统参数、建立多级调度指挥中心和设置不同作业人员的权限；
所述报警管理单元，用于设置报警规则，对制定好的报警规则进行监控，在出现违反报警规则的事件出现时，进行报警消息推送和报警提示；
所述巡查调度单元，用于接收视频采集终端的上报信息，编辑和发送调度信息给被调度终端，对现场就近区域的作业人员进行统计调度；
所述集群对讲单元，用于根据上报人员、调度指挥人员和作业人员建立对讲组，实现对讲组成员之间的对讲呼叫，以及对对讲组成员进行管理；
所述实时视频单元，用于支持多人多路同时视频，通过数字图像处理技术和防抖动算法，在视频时实现快速自动对焦，保障视频图像的稳定清晰，现场作业过程中，调实时监控现场的险情和作业人员的作业情况；
所述内容管理单元，用于查看作业人员在现场作业过程中的地理位置信息、历史轨迹信息和其他信息。
优选地，所述用户终端通过gps装置实时采集地理位置信息，通过麦克风采集音频数据，通过摄像头采集视频数据，通过扩音器播放接收的音频文件，通过显示器播放视频文件，通过触摸屏或键盘获取用户输入的信息。
第二方面，本发明提供了一种基于智能调度指挥方法，适用于第一方面所述的基于智能调度指挥系统，包括以下步骤：
视频采集终端和调度指挥平台之间通过音视频服务器进行流媒体连接后，视频采集终端将采集的现场的音视频数据发送给调度指挥平台；
调度指挥平台发送调度信息给被调度终端，对现场就近区域的作业人员进行统计调度；
现场作业过程中，调度指挥平台通过音视频服务器实时监控现场的险情和作业人员的作业情况。
当音视频服务器接收到用户终端的音视频请求时，通过信令服务对视频采集终端和调度指挥平台进行双方的鉴权，鉴权通过后根据ip和端口通知双方建立流媒体连接，接收到调度指挥平台反馈的同意请求后流媒体连接建立成功，在整个通讯过程中，信令服务一直监控所述流媒体连接的状态；
如果是音频通信，通过音频服务对接收的音频数据进行编解码及压缩优化处理，并将处理后的音频数据发送给被接收方；
如果是视频通信，通过视频服务对接收的视频数据进行编解码及压缩优化处理，并将处理后的视频数据发送给被接收方；
如果同时进行音频和视频通信，通过合成服务将处理后音频数据和处理后的视频合成我一个完整的音视频文件，再将音视频文件发送给被接收方。
设置报警规则，对制定好的报警规则进行监控，在出现违反报警规则的事件出现时，进行报警消息推送和报警提示；
接收视频采集终端的上报信息，编辑和发送调度信息给被调度终端，对现场就近区域的作业人员进行统计调度；
根据上报人员、调度指挥人员和作业人员建立对讲组，实现对讲组成员之间的对讲呼叫，以及对对讲组成员进行管理；
支持多人多路同时视频，通过数字图像处理技术和防抖动算法，在视频时实现快速自动对焦，保障视频图像的稳定清晰，现场作业过程中，调实时监控现场的险情和作业人员的作业情况；
本发明的有益效果为：通过丰富的多媒体交互方式，调度指挥人员与现场的上报人员和作业人员进行音视频通讯，更准确的收集、分析、评估现场情况，从而实现及时响应、精准指挥、快速决策的目的，提高调度指挥的效率。
为了更清楚地说明本发明具体实施方式或现有技术中的技术方案，下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍。在所有附图中，类似的元件或部分一般由类似的附图标记标识。附图中，各元件或部分并不一定按照实际的比例绘制。
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
应当理解，当在本说明书和所附权利要求书中使用时，术语“包括”和“包含”指示所描述特征、整体、步骤、操作、元素和/或组件的存在，但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。
还应当理解，在此本发明说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本发明。如在本发明说明书和所附权利要求书中所使用的那样，除非上下文清楚地指明其它情况，否则单数形式的“一”、“一个”及“该”意在包括复数形式。
具体实现中，本发明实施例中描述的终端包括但不限于诸如具有触摸敏感表面(例如，触摸屏显示器和/或触摸板)的移动电话、膝上型计算机或平板计算机之类的其它便携式设备。还应当理解的是，在某些实施例中，所述设备并非便携式通信设备，而是具有触摸敏感表面(例如，触摸屏显示器和/或触摸板)的台式计算机。
本实施例提供了一种基于智能调度指挥系统，如图1所示，包括调度指挥平台、音视频服务器、业务集群服务器、存储服务器和用户终端；所述用户终端包括但不限于视频采集终端和被调度终端；
所述音视频服务器分别与存储服务器、调度指挥平台和用户终端通讯，用于建立调度指挥平台和用户终端之间的流媒体连接，实现调度指挥平台和用户终端的音视频通讯，并将音视频通讯过程中的音视频文件存储到存储服务器；
所述业务集群服务器分别与调度指挥平台和用户终端通讯，用于将视频采集终端的上报信息发送给调度指挥平台，将调度指挥平台的调度信息发送给被调度终端，用于实现调度指挥平台和用户终端之间、多个用户终端之间的非音视频的通讯。
本实施例的终端可以为智能手机、ipad、电脑等，各个终端均安装了调度系统app；调度指挥平台可以包括pc电脑，也可以包括视频设备、音频设备和服务器的组合。本实施例中华体会上报人员在进行现场巡查时(例如铁路巡查、电气线路巡查等)，发现异常情况或遇到突发情况，上报人员打开视频采集终端上的调度系统app，通过业务集群服务器给调度指挥平台发送上报信息，所述上报信息包括但不限于上报人员信息、上报的地理位置信息等，调度指挥平台看到上报信息后即明白什么地方发生了险情。然后视频采集终端通过音视频服务器与调度管理平台建立流媒体连接，进行音视频通讯，实时采集现场的音视频数据并发送给调度指挥平台，调度指挥平台的调度指挥人员可通过音视频更加准确的了解现场的情况，更加准确的对现场的情况进行分析和评估，并判断需要哪些作业人员和需要多少作业人员，并根据被调度终端实时上传的地理位置信息，搜索现场附近的工作人员，并发送调度信息给现场附近的被调度终端，从而对现场附近的工作人员进行调度，使其能即使赶到现场进行救助。在现场作业过程中，调度指挥平台通过音视频服务器实时监控现场的险情和作业人员的作业情况。
其中，如图2所示，所述音视频服务器包括但不限于信令服务单元、音频服务单元、视频服务单元和合成服务单元；
所述信令服务单元，用于建立用户终端和调度指挥平台之间的流媒体连接并且维持连接的稳定和监控连接的状态；
所述合成服务单元，用于将处理后的音频数据和处理后的视频数据通过计算和优化，整合成为一个完整的音视频文件。
在采集或作业工程中，当音视频服务器接收到用户终端的音视频请求时，通过信令服务对视频采集终端和调度指挥平台进行双方的鉴权，鉴权通过后根据ip和端口通知双方建立流媒体连接，接收到调度指挥平台反馈的同意请求后流媒体连接建立成功，在整个通讯过程中，信令服务一直监控所述流媒体连接的状态；如果是音频通信，通过音频服务对接收的音频数据进行编解码及压缩优化处理，并将处理后的音频数据发送给被接收方；如果是视频通信，通过视频服务对接收的视频数据进行编解码及压缩优化处理，并将处理后的视频数据发送给被接收方；如果同时进行音频和视频通信，通过合成服务将处理后音频数据和处理后的视频合成我一个完整的音视频文件，再将音视频文件发送给被接收方。
其中，如图3所示，所述调度指挥平台包括但不限于集群对讲单元、实时视频单元、巡线定位单元、报警管理单元、内容管理单元和系统管理单元；
所述系统管理单元，用于设置系统参数、建立多级调度指挥中心和设置不同作业人员的权限。本实施例可分为多级调度指挥，如调度指挥平台包括两级调度指挥中心，一级调度指挥中心发送调度指令给二级调度指挥中心，二级调度指挥中心将调度信息发送给被调度终端，同一级的调度指挥中心是相互独立的。对于不用的调度指挥中心的调度指挥人员和实际操作的作业人员设置不同的权限。
所述报警管理单元，用于设置报警规则，对制定好的报警规则进行监控，在出现违反报警规则的事件出现时，进行报警消息推送和报警提示。报警消息和报警提示不仅用于提醒调度指挥人员，同时还发送给相应的作业人员的被调度终端，用于提醒作业人员。
所述巡查调度单元，用于接收视频采集终端的上报信息，编辑和发送调度信息给被调度终端，对现场就近区域的作业人员进行统计调度。
所述集群对讲单元，用于根据上报人员、调度指挥人员和作业人员建立对讲组，实现对讲组成员之间的对讲呼叫，以及对对讲组成员进行管理。集群对讲功能包含单呼、组呼、群呼、选呼、监听、强插、强拆、禁言、点名及语音会商，可以管理(增、删、改、查)对讲组及对讲组成员，支持新增临时组、地图选人建组，可以对群组成员信息进行管理并支持对群组成员的话语权进行优先级设置。采用4g公网对讲，延迟在200ms以内，对讲无延迟，解决了传统公网对讲延迟及掉线问题。
所述实时视频单元，用于支持多人多路同时视频，通过数字图像处理技术和防抖动算法，在视频时实现快速自动对焦，保障视频图像的稳定清晰，现场作业过程中，调实时监控现场的险情和作业人员的作业情况；还用于支持手持终端、监控摄像头等多形态终端接入，支持视频会商、视频调用、以及调节视频参数。
所述内容管理单元，用于查看作业人员在现场作业过程中的地理位置信息、历史轨迹信息和其他信息。在作业过程中作业人员、车辆和设备通过实时定位将地理位置信息通过业务集群服务器发送给调度指挥平台，调度指挥平台可查看地理位置信息、历史轨迹信息和其他信息，其他信息包括时间信息、天气信息等，通过音视频服务器将音视频数据发送给调度指挥平台。地理位置信息和历史轨迹信息在地图上可以进行图形化交互，实现文字、图片、音频、视频等多媒体协同交互。从而实时了解现场情况。内容管理单元还可进行删除、下载、修改、播放等操作。
其中，所述用户终端通过gps装置实时采集地理位置信息，通过麦克风采集音频数据，通过摄像头采集视频数据，通过扩音器播放接收的音频文件，通过显示器播放视频文件，通过触摸屏或键盘获取用户输入的信息。用户终端可以根据权限进行上传资料、查看信息、删除信息等。
综上所述，通过丰富的多媒体交互方式，调度指挥人员与现场的上报人员和作业人员进行音视频通讯，更准确的收集、分析、评估现场情况，从而实现及时响应、精准指挥、快速决策的目的，提高调度指挥的效率。
本实施例提供了一种基于智能调度指挥方法，适用于第一方面所述的基于智能调度指挥系统，如图4所示，包括以下步骤：
s2，视频采集终端和调度指挥平台之间通过音视频服务器进行流媒体连接后，视频采集终端将采集的现场的音视频数据发送给调度指挥平台。
s3，调度指挥平台发送调度信息给被调度终端，对现场就近区域的作业人员进行统计调度。
s4，现场作业过程中，调度指挥平台通过音视频服务器实时监控现场的险情和作业人员的作业情况。
本实施例中的终端可以为智能手机、ipad、电脑等，各个终端均安装了调度系统app；调度指挥平台可以为pc电脑，也可以包括视频设备、音频设备和服务器的组合。本实施例中上报人员在进行现场巡查时(例如铁路巡查、电气线路巡查等)，发现异常情况或遇到突发情况，上报人员打开视频采集终端上的调度系统app，通过业务集群服务器给调度指挥平台发送上报信息，所述上报信息包括但不限于上报人员信息、上报的地理位置信息等，调度指挥平台看到上报信息后即明白什么地方发生了险情。然后视频采集终端通过音视频服务器与调度管理平台建立流媒体连接，进行音视频通讯，实时采集现场的音视频数据并发送给调度指挥平台，调度指挥平台的调度指挥人员可通过音视频更加准确的了解现场的情况，更加准确的对现场的情况进行分析和评估，并判断需要哪些作业人员和需要多少作业人员，并根据被调度终端实时上传的地理位置信息，搜索现场附近的工作人员，并发送调度信息给现场附近的被调度终端，从而对现场附近的工作人员进行调度，使其能即使赶到现场进行救助。在现场作业过程中，调度指挥平台通过音视频服务器实时监控现场的险情和作业人员的作业情况。
在采集或作业工程中，当音视频服务器接收到用户终端的音视频请求时，通过信令服务对视频采集终端和调度指挥平台进行双方的鉴权，鉴权通过后根据ip和端口通知双方建立流媒体连接，接收到调度指挥平台反馈的同意请求后流媒体连接建立成功，在整个通讯过程中，信令服务一直监控所述流媒体连接的状态；
如果是音频通信，通过音频服务对接收的音频数据进行编解码及压缩优化处理，并将处理后的音频数据发送给被接收方；
如果是视频通信，通过视频服务对接收的视频数据进行编解码及压缩优化处理，并将处理后的视频数据发送给被接收方；
如果同时进行音频和视频通信，通过合成服务将处理后音频数据和处理后的视频合成我一个完整的音视频文件，再将音视频文件发送给被接收方。
设置系统参数、建立多级调度指挥中心和设置不同作业人员的权限。本实施例可分为多级调度指挥，如调度指挥平台包括两级调度指挥中心，一级调度指挥中心发送调度指令给二级调度指挥中心，二级调度指挥中心将调度信息发送给被调度终端，同一级的调度指挥中心是相互独立的。对于不用的调度指挥中心的调度指挥人员和实际操作的作业人员设置不同的权限。
设置报警规则，对制定好的报警规则进行监控，在出现违反报警规则的事件出现时，进行报警消息推送和报警提示。报警消息和报警提示不仅用于提醒调度指挥人员，同时还发送给相应的作业人员的被调度终端，用于提醒作业人员。
接收视频采集终端的上报信息，编辑和发送调度信息给被调度终端，对现场就近区域的作业人员进行统计调度。
根据上报人员、调度指挥人员和作业人员建立对讲组，实现对讲组成员之间的对讲呼叫，以及对对讲组成员进行管理。集群对讲功能包含单呼、组呼、群呼、选呼、监听、强插、强拆、禁言、点名及语音会商，可以管理(增、删、改、查)对讲组及对讲组成员，支持新增临时组、地图选人建组，可以对群组成员信息进行管理并支持对群组成员的话语权进行优先级设置。采用4g公网对讲，延迟在200ms以内，对讲无延迟，解决了传统公网对讲延迟及掉线问题。
支持多人多路同时视频，通过数字图像处理技术和防抖动算法，在视频时实现快速自动对焦，保障视频图像的稳定清晰，现场作业过程中，调实时监控现场的险情和作业人员的作业情况；还用于支持手持终端、监控摄像头等多形态终端接入，支持视频会商、视频调用、以及调节视频参数。
查看作业人员在现场作业过程中的地理位置信息、历史轨迹信息和其他信息。在作业过程中作业人员、车辆和设备通过实时定位将地理位置信息通过业务集群服务器发送给调度指挥平台，调度指挥平台可查看地理位置信息、历史轨迹信息和其他信息，其他信息包括时间信息、天气信息等，通过音视频服务器将音视频数据发送给调度指挥平台。地理位置信息和历史轨迹信息在地图上可以进行图形化交互，实现文字、图片、音频、视频等多媒体协同交互。从而实时了解现场情况。内容管理单元还可进行删除、下载、修改、播放等操作。
综上所述，通过丰富的多媒体交互方式，调度指挥人员与现场的上报人员和作业人员进行音视频通讯，更准确的收集、分析、评估现场情况，从而实现及时响应、精准指挥、快速决策的目的，提高调度指挥的效率。
本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的模块及方法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
在本申请所提供的几个实施例中，应该理解到，所描述的系统和方法，可以通过其它的方式实现。例如，以上所描述的系统和方法的实施例仅仅是示意性的，例如，所述模块和步骤的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个模块或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。
最后应说明的是：以上各实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述各实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围，其均应涵盖在本发明的权利要求和说明书的范围当中。
针对应急通信中多系统互不兼容、基础设施损毁导致通信中断、定位精度不足等问题，提出多网融合解决方案。通过集成LTE专网、LoRA窄带网、无线自组网及RTK/UWB双模定位技术，构建室内外无缝覆盖...
1821614、一种应急侦测通信指挥一体化平台的调度管理方法及系统与流程
针对城市轨道交通乘客调度系统信息分散、应急响应效率低的问题，提出构建集成化智能调度系统。通过部署冗余配置的调度服务器、多专业接口FEP及车辆网关，结合车站和车载的视频识别装置，实现客流动态感知...
1821617、一种面向城市轨道交通的乘客智能调度指挥系统及方法与流程
针对城市轨道交通中乘客调度信息孤岛、应急响应效率低的问题，提出集成多源系统数据的智能调度方案。通过部署车站与车载客流识别装置，结合深度学习实时分析客流状态，利用智能调度引擎联动ATS、BAS等...
针对现有智能调度系统存在数据处理能力差、视频信号实时性弱等问题，提出基于视频矩阵的智能调度管理系统。通过引入SNMP代理模块优化数据通信，结合视频矩阵与调度控制器提升信号处理能力，实现高效、低...
针对现有智能调度系统结构复杂、处理能力弱、实时性差的问题，提出基于视频矩阵的智能调度方案。通过视频矩阵与调度控制器协同，实现输入输出通道的智能切换，结合视频处理芯片与数码显示模块，提升数据处理...
针对港口作业车辆调度中存在的手工管理效率低、数据实时性差、安全隐患大等问题，提出融合GPS、GIS、GPRS技术的智能调度系统。通过构建数据处理中心、移动站分系统等模块，实现车辆实时定位监控、...
1.数字信号处理 2.传感器技术及应用 3.机电一体化产品开发 4.机械工程测试技术 5.逆向工程技术研究
1.振动信号时频分析理论与测试系统设计 2.汽车检测系统设计 3.汽车电子控制系统设计