技术领域
[0001] 本
申请涉及视频监控技术，尤其涉及一种视频摘要生成方法、装置、电子设备及可读存储介质。
背景技术
[0002] 视频
监控系统作为社会安全管理的重要技术手段，在社会治安维护领域的应用和部署越来越广。随着所部署的监控设备数量的增加和范围的扩大，所存储视频录像数据的数据量也越来越大。若想从视频录像数据中查找出特定目标(人或车辆等)在哪些时间段、哪些地点出现过，往往需要人工对大量的视频录像数据进行回放查找，耗时较长且可能会疏忽遗漏，在录像
定位、整合展示方面存在效率
瓶颈和不完整
风险。
发明内容
[0003] 有鉴于此，本申请提供一种视频摘要生成方法及其装置。
[0004] 具体地，本申请是通过如下技术方案实现的：
[0005] 根据本申请
实施例的第一方面，提供一种视频摘要生成方法，包括：
[0006] 接收目标搜索
请求，所述目标搜索请求中携带有待搜索目标的特征信息；
[0007] 搜索与所述待搜索目标的特征信息匹配的第一目标图片信息；其中，所述第一目标图片信息包括第一目标图片和第一目标图片的采集时间；
[0008] 根据所述第一目标图片信息生成视频摘要。
[0009] 可选地，所述搜索与待搜索目标的特征信息匹配的第一目标图片信息之前，还包括：
[0010] 获取视频源设备的视频数据中的目标图片信息，所述目标图片信息包括目标图片、目标图片的采集时间以及目标图片的
属性信息；
[0011] 将所述目标图片信息保存至图片信息库。
[0012] 可选地，所述获取视频源设备的视频数据中的目标图片信息，包括：
[0013] 接收所述视频源设备发送目标图片信息。
[0014] 可选地，所述获取视频源设备的视频数据中的目标图片信息，包括：
[0015] 接收所述视频源设备发送的目标图片及目标图片的采集时间；
[0016] 对所述目标图片进行建模，并提取所述目标图片的属性信息。
[0017] 可选地，所述获取视频源设备的视频数据中的目标图片信息，包括：
[0018] 接收所述视频源设备发送的目标图片信息、目标图片的采集时间以及目标图片的第一属性信息；
[0019] 对所述目标图片进行建模，并提取所述目标图片的第二属性信息；
[0020] 根据所述目标图片的第一特征信息和所述目标图片的第二属性信息确定所述目标图片的属性信息。
[0021] 可选地，所述获取视频源设备的视频数据中的目标图片信息，包括：
[0022] 对所述视频源设备提供的视频数据进行目标检测，以得到所述视频数据中的目标图片及目标图片的采集时间；
[0023] 对所述目标图片进行建模，并提取所述目标图片的属性信息。
[0024] 可选地，所述将目标图片信息保存至图片信息库，包括：
[0025] 对于任一视频数据通道的任一目标图片信息，判断所述图片信息库中是否保存有与该目标图片信息包含同一目标的其它目标图片信息；其中，该其它目标图片信息与该目标图片信息来自同一视频数据通道，且该其它目标图片信息包括的采集时间与该目标图片信息中包括的采集时间的差值小于预设时间
阈值；
[0026] 当所述图片信息库中未保存有与该目标图片信息包含同一目标的其它目标图片信息时，将该目标图片信息保存至所述图片信息库；
[0027] 当所述图片信息库中保存有与该目标图片信息包含同一目标的其它目标图片信息时，拒绝将该目标图片信息保存至所述图片信息库。
[0028] 可选地，所述待搜索目标的特征信息包括待搜索目标图片；
[0029] 所述搜索与所述待搜索目标的特征信息匹配的第一目标图片信息，包括：
[0030] 对所述待搜索目标图片进行建模，并提取所述待搜索目标图片的属性信息；
[0031] 根据所述待搜索目标的属性信息在所述图片信息库中搜索匹配的第一目标图片信息。
[0032] 可选地，所述待搜索目标的特征信息包括待搜索目标图片和待搜索目标图片的第一属性信息；
[0033] 所述搜索与所述待搜索目标的特征信息匹配的第一目标图片信息，包括：
[0034] 对所述待搜索目标图片进行建模，并提取所述待搜索目标图片的第二属性信息；
[0035] 根据所述待搜索目标图片的第一属性信息和所述待搜索目标图片的第二属性信息，确定所述待搜索目标图片的属性信息；
[0036] 根据所述待搜索目标图片的属性信息在所述图片信息库中搜索匹配的第一目标图片信息。
[0037] 可选地，所述目标搜索请求中还携带有搜索时间段范围；
[0038] 所述搜索与所述待搜索目标的特征信息匹配的第一目标图片信息，包括：
[0039] 根据所述搜索时间段范围对所述图片信息库中的目标图片信息进行筛选，以得到采集时间在所述搜索时间段范围内的目标图片信息；
[0040] 根据所述待搜索目标的特征信息从所述采集时间在所述搜索时间段范围内的目标图片信息中搜索匹配的第一目标图片信息。
[0041] 可选地，所述目标搜索请求中还携带有搜索通道号，所述目标图片信息还包括有目标图片的通道号；
[0042] 所述搜索与所述待搜索目标的特征信息匹配的第一目标图片信息，包括：
[0043] 根据所述搜索通道号对所述图片信息库中的目标图片信息进行筛选，以得到通道号与所述搜索通道号一致的目标图片信息；
[0044] 根据所述待搜索目标的特征信息从所述通道号与所述搜索通道号一致的目标图片信息中搜索匹配的第一目标图片信息。
[0045] 可选地，所述根据所述第一目标图片信息生成视频摘要，包括：
[0046] 根据按采集时间从早到晚的顺序排序后的所述第一目标图片，生成视频摘要。
[0047] 可选地，所述根据所述第一目标图片信息生成视频摘要，包括：
[0048] 对于任一第一目标图片信息，确定该第一目标图片信息对应的目标录像
片段；其中，该目标录像片段为该第一目标图片的采集时间之前的第n秒以及该第一目标图片的采集时间之后的第m秒之间的录像数据；
[0049] 根据各目标录像片段生成视频摘要。
[0050] 可选地，所述对于任一第一目标图片信息，确定该第一目标图片信息对应的目标录像片段，包括：
[0051] 当存在采集时间相同的多条第一目标图片信息时，对于该多条第一目标图片信息中的任一第一目标图片信息，确定该第一目标图片信息对应的录像片段的起始时间点和结束时间点；其中，该起始时间点为该第一目标图片的采集时间之前的第n秒，该结束时间点为该第一目标图片的采集时间之后的第m秒；
[0052] 搜索该第一目标图片所属的视频数据通道的录像数据中是否存在该起始时间点的I
帧，以及是否存在该结束时间的I帧；
[0053] 若均存在，则丢弃该多条第一目标图片信息中的其余第一目标图片信息，并将该第一目标图片信息对应的录像片段确定为目标录像片段。
[0054] 可选地，所述搜索该第一目标图片所属的视频数据通道的录像数据中是否存在该起始时间点的I帧，以及是否存在该结束时间的I帧之后，还包括：
[0055] 若不存在该起始时间点的I帧，则将该第一目标图片对应的录像片段的起始时间点增加1秒，并重复上述搜索步骤，直至在该第一目标图片所属的视频数据通道的录像数据中搜索到该起始时间点的I帧，或，该第一目标图片对应的录像片段的起始时间点与结束时间点相同；
[0056] 若不存在该结束时间点的I帧，则将该第一目标图片对应的录像片段的结束时间点减少1秒，并重复上述搜索步骤，直至在该第一目标图片所属的视频数据通道的录像数据中搜索到该结束时间点的I帧，或，该第一目标图片对应的录像片段的起始时间点与结束时间点相同；
[0057] 确定该多条第一目标图片信息中对应的录像片段的时长最长的第一目标图片信息，将该第一目标图片信息对应的录像片段确定为目标录像片段，并丢弃该多条第一目标图片信息中的其余第一目标图片信息。
[0058] 可选地，所述根据各目标录像片段生成视频摘要，包括：
[0059] 根据各目标录像片段的起始时间点和结束时间点对目标录像片段进行过滤，以去除重复时间的录像数据；
[0060] 根据过滤后的目标录像片段生成视频摘要。
[0061] 可选地，所述根据各目标录像片段的起始时间点和结束时间点对目标录像片段进行过滤，包括：
[0062] 按照各目标录像片段的起始时间点对各目标录像片段进行排序；
[0063] 对于相邻的第一目标录像片段和第二目标录像片段，当所述第一目标录像片段的结束时间点大于等于所述第二目标录像片段的起始时间点时，
[0064] 若所述第一目标录像片段和所述第二目标录像片段属于同一视频数据通道，则将所述第一目标录像片段和所述第二目标录像片段合并，合并后的录像片段的起始时间点为所述第一目标录像片段的起始时间点，结束时间点为所述第二目标录像片段的结束时间点；
[0065] 若所述第一目标录像片段和所述第二目标录像片段属于不同视频数据通道，则以所述第一目标录像片段的结束时间点作为所述第二目标录像片段的起始时间点，或，以所述第二目标片段的起始时间点作为所述第一目标录像片段的结束时间点；
[0066] 其中，所述第一目标录像片段的起始时间点小于所述第二目标录像片段的起始时间点。
[0067] 根据本申请实施例的第二方面，提供一种视频摘要生成装置，包括：
[0068] 接收单元，用于接收目标搜索请求，所述目标搜索请求中携带有待搜索目标的特征信息；
[0069] 搜索单元，用于搜索与所述待搜索目标的特征信息匹配的第一目标图片信息；其中，所述第一目标图片信息包括第一目标图片和第一目标图片的采集时间；
[0070] 处理单元，用于根据所述第一目标图片信息生成视频摘要。
[0071] 可选地，所述装置还包括：
[0072] 获取单元，用于获取视频源设备的视频数据中的目标图片信息，所述目标图片信息包括目标图片、目标图片的采集时间以及目标图片的属性信息；
[0073] 存储单元，用于将所述目标图片信息保存至图片信息库。
[0074] 可选地，所述获取单元，具体用于接收所述视频源设备发送目标图片信息。
[0075] 可选地，所述获取单元，具体用于接收所述视频源设备发送的目标图片及目标图片的采集时间；对所述目标图片进行建模，并提取所述目标图片的属性信息。
[0076] 可选地，所述获取单元，具体用于接收所述视频源设备发送的目标图片信息、目标图片的采集时间以及目标图片的第一属性信息；对所述目标图片进行建模，并提取所述目标图片的第二属性信息；根据所述目标图片的第一特征信息和所述目标图片的第二属性信息确定所述目标图片的属性信息。
[0077] 可选地，所述获取单元，具体用于对所述视频源设备提供的视频数据进行目标检测，以得到所述视频数据中的目标图片及目标图片的采集时间；对所述目标图片进行建模，并提取所述目标图片的属性信息。
[0078] 可选地，所述保存单元，具体用于对于任一视频数据通道的任一目标图片信息，判断所述图片信息库中是否保存有与该目标图片信息包含同一目标的其它目标图片信息；其中，该其它目标图片信息与该目标图片信息来自同一视频数据通道，且该其它目标图片信息包括的采集时间与该目标图片信息中包括的采集时间的差值小于预设时间阈值；
[0079] 当所述图片信息库中未保存有与该目标图片信息包含同一目标的其它目标图片信息时，将该目标图片信息保存至所述图片信息库；
[0080] 当所述图片信息库中保存有与该目标图片信息包含同一目标的其它目标图片信息时，拒绝将该目标图片信息保存至所述图片信息库。
[0081] 可选地，所述待搜索目标的特征信息包括待搜索目标图片；
[0082] 所述搜索单元，具体用于对所述待搜索目标图片进行建模，并提取所述待搜索目标图片的属性信息；根据所述待搜索目标的属性信息在所述图片信息库中搜索匹配的第一目标图片信息。
[0083] 可选地，所述待搜索目标的特征信息包括待搜索目标图片和待搜索目标图片的第一属性信息；
[0084] 所述搜索单元，具体用于对所述待搜索目标图片进行建模，并提取所述待搜索目标图片的第二属性信息；根据所述待搜索目标图片的第一属性信息和所述待搜索目标图片的第二属性信息，确定所述待搜索目标图片的属性信息；根据所述待搜索目标图片的属性信息在所述图片信息库中搜索匹配的第一目标图片信息。
[0085] 可选地，所述目标搜索请求中还携带有搜索时间段范围；
[0086] 所述搜索单元，具体用于根据所述搜索时间段范围对所述图片信息库中的目标图片信息进行筛选，以得到采集时间在所述搜索时间段范围内的目标图片信息；
[0087] 根据所述待搜索目标的特征信息从所述采集时间在所述搜索时间段范围内的目标图片信息中搜索匹配的第一目标图片信息。
[0088] 可选地，所述目标搜索请求中还携带有搜索通道号，所述目标图片信息还包括有目标图片的通道号；
[0089] 所述搜索单元，具体用于根据所述搜索通道号对所述图片信息库中的目标图片信息进行筛选，以得到通道号与所述搜索通道号一致的目标图片信息；
[0090] 根据所述待搜索目标的特征信息从所述通道号与所述搜索通道号一致的目标图片信息中搜索匹配的第一目标图片信息。
[0091] 可选地，所述处理单元，具体用于根据按采集时间从早到晚的顺序排序后的所述第一目标图片，生成视频摘要。
[0092] 可选地，所述处理单元，具体用于对于任一第一目标图片信息，确定该第一目标图片信息对应的目标录像片段；其中，该目标录像片段为该第一目标图片的采集时间之前的第n秒以及该第一目标图片的采集时间之后的第m秒之间的录像数据；根据各目标录像片段生成视频摘要。
[0093] 可选地，所述处理单元，具体用于当存在采集时间相同的多条第一目标图片信息时，对于该多条第一目标图片信息中的任一第一目标图片信息，确定该第一目标图片信息对应的录像片段的起始时间点和结束时间点；其中，该起始时间点为该第一目标图片的采集时间之前的第n秒，该结束时间点为该第一目标图片的采集时间之后的第m秒；搜索该第一目标图片所属的视频数据通道的录像数据中是否存在该起始时间点的I帧，以及是否存在该结束时间的I帧；若均存在，则丢弃该多条第一目标图片信息中的其余第一目标图片信息，并将该第一目标图片信息对应的录像片段确定为目标录像片段。
[0094] 可选地，所述处理单元，还用于若不存在该起始时间点的I帧，则将该第一目标图片对应的录像片段的起始时间点增加1秒，并重复上述搜索步骤，直至在该第一目标图片所属的视频数据通道的录像数据中搜索到该起始时间点的I帧，或，该第一目标图片对应的录像片段的起始时间点与结束时间点相同；若不存在该结束时间点的I帧，则将该第一目标图片对应的录像片段的结束时间点减少1秒，并重复上述搜索步骤，直至在该第一目标图片所属的视频数据通道的录像数据中搜索到该结束时间点的I帧，或，该第一目标图片对应的录像片段的起始时间点与结束时间点相同；确定该多条第一目标图片信息中对应的录像片段的时长最长的第一目标图片信息，将该第一目标图片信息对应的录像片段确定为目标录像片段，并丢弃该多条第一目标图片信息中的其余第一目标图片信息。
[0095] 可选地，所述处理单元，具体用于根据各目标录像片段的起始时间点和结束时间点对目标录像片段进行过滤，以去除重复时间的录像数据；根据过滤后的目标录像片段生成视频摘要。
[0096] 可选地，所述处理单元，具体用于按照各目标录像片段的起始时间点对各目标录像片段进行排序；
[0097] 对于相邻的第一目标录像片段和第二目标录像片段，当所述第一目标录像片段的结束时间点大于等于所述第二目标录像片段的起始时间点时，
[0098] 若所述第一目标录像片段和所述第二目标录像片段属于同一视频数据通道，则将所述第一目标录像片段和所述第二目标录像片段合并，合并后的录像片段的起始时间点为所述第一目标录像片段的起始时间点，结束时间点为所述第二目标录像片段的结束时间点；
[0099] 若所述第一目标录像片段和所述第二目标录像片段属于不同视频数据通道，则以所述第一目标录像片段的结束时间点作为所述第二目标录像片段的起始时间点，或，以所述第二目标片段的起始时间点作为所述第一目标录像片段的结束时间点；
[0100] 其中，所述第一目标录像片段的起始时间点小于所述第二目标录像片段的起始时间点。
[0101] 根据本申请实施例的第三方面，提供一种电子设备，其特征在于，包括处理器、通信
接口、
存储器和通信总线，其中，处理器，
通信接口，存储器通过通信总线完成相互间的通信；
[0103] 处理器，用于执行存储器上所存放的程序时，实现上述视频摘要生成方法步骤。
[0104] 根据本申请实施例的第四方面，提供一种计算机可读存储介质，其特征在于，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现上述视频摘要生成步骤。
[0105] 本申请实施例的视频摘要生成方法，通过接收目标搜索请求，搜索与该目标搜索请求中携带的待搜索目标的特征信息匹配的第一目标图片信息，并根据各第一目标图片信息生成待搜索目标的视频摘要，提高了在视频录像中定位目标的效率和准确性，在去除与待搜索目标不匹配的视频录像的
基础上，保证了目标视频
跟踪的连贯性。
附图说明
[0106] 图1是本申请一示例性实施例示出的一种视频摘要生成系统的架构示意图；
[0107] 图2是本申请一示例性实施例示出的一种视频摘要生成方法的流程示意图；
[0108] 图3是本申请一示例性实施例示出的图片信息库生成的流程示意图；
[0109] 图4是本申请一示例性实施例示出的一种重复图片过滤的流程示意图；
[0110] 图5是本申请一示例性实施例示出的一种视频摘要生成装置的结构示意图；
[0111] 图6是本申请又一示例性实施例示出的一种视频摘要生成装置的结构示意图；
[0112] 图7是本申请一示例性实施例示出的一种电子设备的
硬件结构示意图。
具体实施方式
[0113] 这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反，它们仅是与如所附
权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
[0114] 在本申请使用的术语是仅仅出于描述特定实施例的目的，而非旨在限制本申请。在本申请和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式，除非上下文清楚地表示其他含义。
[0115] 为了使本领域技术人员更好地理解本申请实施例提供的技术方案，下面先对本申请实施例适用的系统架构进行简单说明。
[0116] 请参见图1，为本申请实施例提供的一种视频摘要生成系统的架构示意图，如图1所示，该视频摘要生成系统可以包括视频源设备以及搜索设备；其中：
[0117] 视频源设备可以提供视频数据；其中，该视频数据可以包括实时视频数据或视频录像数据(本文中简称为录像数据)。
[0118] 搜索设备可以接收目标搜索请求，并根据目标搜索请求中携带的待搜索目标的特征信息，搜索视频源设备的视频数据中存在的与待搜索目标的特征信息匹配的目标图片(本文中称为第一目标图片)，并根据搜索到的第一目标图片，生成待搜索目标的视频摘要。
[0119] 需要说明的是，在本申请实施例中，视频源设备可以为前端视频采集设备(如IPC(Internet Protocol Camera，网络摄像机))或视频录像存储设备(如NVR(Network Video Recorder，网络
硬盘录像机))；搜索设备可以为NVR(具有目标搜索功能)或视频监控系统中部署的专用于进行目标搜索的设备。
[0120] 其中，当视频源设备为NVR时，视频源设备和搜索设备可以为同一设备。
[0121] 此外，一个视频源设备可以为多个搜索设备提供视频数据，一个搜索设备也可以从多个视频源设备中获取视频数据(图中以一对一为例)。
[0122] 其中，当视频源设备为IPC时，一个视频源设备可以对应一个视频数据通道；当视频源设备为NVR等视频录像存储设备时，一个视频源设备可以提供多个视频数据通道的视频数据(录像数据)。
[0123] 为例使本申请实施例的上述目的、特征和优点能够更加明显易懂，下面结合附图对本申请实施例中技术方案作进一步详细的说明。
[0124] 请参见图2，为本申请实施例提供的一种视频摘要生成方法的流程示意图，其中，该视频摘要生成方法可以应用于搜索设备(以NVR为例)，如图2所示，该视频摘要生成方法可以包括以下步骤：
[0125] 步骤S200、接收目标搜索请求，该目标搜索请求中携带有待搜索目标的特征信息。
[0126] 本申请实施例中，目标可以包括但不限于人脸、车辆或车牌等。
[0127] 其中，当待搜索目标为人脸时，待搜索目标的特征信息可以包括但不限于人脸图片、人脸的结构化信息(如是否微笑、是否戴眼镜、性别、年龄段等)等中的一个或多个；
[0128] 当待搜索目标为车辆时，待搜索目标的特征信息可以但不限于车辆图片、车辆的特征信息(如
颜色、类型、车标、品牌等)等中的一个或多个；
[0129] 当待搜索目标为车牌时，待搜索目标的特征信息可以包括但不限于车牌图片、车牌的特征信息(如颜色、
位置、车牌号等)等中的一个或多个。
[0130] 步骤S210、搜索与待搜索目标的特征信息匹配的第一目标图片信息，该第一目标图片信息包括第一目标图片和第一目标图片的采集时间。
[0131] 本申请实施例中，搜索设备接收到目标搜索请求时，可以根据待搜索目标的特征信息，搜索视频源设备的视频数据中存在的与该待搜索目标的特征信息匹配的第一目标图片，并将该第一目标图片以及该第一目标图片的采集时间作为与该待搜索目标的特征信息匹配的第一目标图片信息。
[0132] 本申请实施例中，搜索设备搜索与待搜索目标的特征信息匹配的第一目标图片时，搜索结果可以为一张或多张第一目标图片，或者，搜索结果可以为空。
[0133] 其中，当搜索结果为空时，即未搜索到与待搜索目标的特征信息匹配的第一目标图片时，搜索设备可以确定目标搜索失败，返回搜索失败响应消息。
[0134] 本申请实施例中，目标图片的采集时间为前端视频采集设备采集(如抓拍)到该目标图片或该目标图片在前端视频采集设备采集到的视频图像中出现的时间。
[0135] 需要说明的是，在本申请实施例中，目标图片的采集时间可以携带在目标图片中(例如，将目标图片的采集时间显示在目标图片中的特定位置(如左下
角或右下角等))，或者，目标图片的采集时间可以独立于目标图片之外，其具体实现在此不做赘述。
[0136] 步骤S220、根据第一目标图片信息生成视频摘要。
[0137] 本申请实施例中，搜索设备确定了与待搜索目标的特征信息匹配的第一目标图片信息之后，可以根据该第一目标图片信息生成待搜索目标的视频摘要。
[0138] 在本申请其中一个实施例中，上述根据第一目标图片信息生成视频摘要，包括：
[0139] 根据按采集时间从早到晚的顺序排序后的第一目标图片，生成视频摘要。
[0140] 在该实施例中，搜索设备可以直接根据按采集时间从早到晚的顺序排序后的第一目标图片，生成视频摘要。
[0141] 例如，当搜索设备搜索到的第一目标图片的数量超过预设数量阈值(可以根据实际需求设定，如200张、500张等)，且按采集时间从早到晚的顺序排序后相邻的第一目标图片的采集时间的差值不超过预设时间阈值(可以根据实际需求设定，如1秒、2秒等)时，搜索设备可以直接根据按采集时间从早到晚的顺序排序后的第一目标图片，生成视频摘要。
[0142] 在本申请另一个实施例中，上述根据所述第一目标图片信息生成视频摘要，包括：
[0143] 对于任一第一目标图片信息，确定该第一目标图片信息对应的目标录像片段；其中，该目标录像为该第一目标图片的采集时间之前的第n秒以及该第一目标图片的采集时间之后的第m秒之后的录像数据；
[0144] 根据各目标录像片段生成视频摘要。
[0145] 本申请实施例中，当搜索设备搜索到与待搜索目标的特征信息匹配的第一目标图片信息时，对于任一第一目标图片信息，搜索设备可以将该第一目标图片的采集时间之前的第n秒以及该第一目标图片的记录之间之后的第m秒之间的录像数据确定为第一目标图片对应的目标录像片段，以得到与待搜索目标的特征信息相匹配的视频录像。
[0146] 其中，第一目标图片的采集时间为该第一目标图片在提取到该第一目标图片的视频数据中出现的时间(即视频采集设备采集到该第一目标图片的时间)。
[0147] 本申请实施例中，第一目标图片信息对应的目标录像片段的起始时间点(第一目标图片的采集时间之前的第n秒)以及结束时间点(第一目标图片的采集时间之后的第m秒)可以预先配置在搜索设备中，也可以携带在目标搜索请求中(可以由用户根据实际设置或采用默认值)。
[0148] 其中，n和m为非负数。
[0149] 需要说明的是，当视频源设备为搜索设备提供的视频数据包括多个视频数据通道的视频数据时，搜索设备在确定第一目标图片信息对应的目标录像片段时，可以先确定第一目标图片所属的视频数据通道，并在该视频数据通道的录像数据中确定第一目标图片信息对应的目标录像片段，即将该视频数据通道的录像数据中，该第一目标图片的采集时间之前的第n秒以及之后的第m秒之前的录像数据确定为第一目标图片对应的目标录像片段。
[0150] 相应地，在该情况下，第一目标图片信息还可以包括第一目标图片的通道号(即第一目标图片所属视频数据通道的通道号)。
[0151] 在该实施例中，搜索设备确定了与待搜索目标的特征信息匹配的各第一目标图片信息对应的目标录像片段之后，搜索设备可以对各目标录像片段进行融合，即根据各目标录像片段的起始时间或/和结束时间对各目标录像片段进行排序和拼接，以生成待搜索目标的视频摘要。
[0152] 可见，在该实施例中，通过搜索与目标搜索请求中携带的待搜索目标的特征信息匹配的第一目标图片信息，并将各第一目标图片的采集时间之前的第n秒以及之后第m秒之间的录像数据确定为第一目标图片信息对应的目标录像片段，进而，通过对各目标录像片段进行融合，得到待搜索目标的视频摘要，提高了在视频录像中定位目标的效率和准确性，在去除与待搜索目标不匹配的视频录像的基础上，保证了目标视频跟踪的连贯性。
[0153] 进一步地，在本申请实施例中，考虑到若每次进行目标搜索，均从视频源设备提供的视频数据中提取匹配的第一目标图片，目标搜索的效率过低，因此，为了提高目标搜索的效率，可以预先从视频源设备提供的视频数据中提取出目标图片信息，并将目标图片信息保存至图片信息库，当需要进行目标搜索时，直接从图片信息库中搜索匹配的第一目标图片信息。
[0154] 相应地，在本申请其中一个实施例中，搜索与待搜索目标的特征信息匹配的第一目标图片信息之前，还可以包括：
[0155] 获取视频源设备的视频数据中的目标图片信息，该目标图片信息包括目标图片、目标图片的采集时间以及目标图片的属性信息；
[0156] 将获取到的目标图片信息保存至图片信息库。
[0157] 在该实施例中，搜索设备可以预先获取视频源设备的视频数据中的目标图片信息，并将获取到的目标图片信息保存至图片信息库，进而，当需要进行目标搜索时，可以直接根据待搜索目标的特征信息从图片信息库中搜索匹配的第一目标图片信息，以提高目标搜索效率。
[0158] 其中，目标图片信息可以包括但不限于目标图片、目标图片的特征信息以及目标图片的采集时间等。
[0159] 图片信息库可以为搜索设备中的
指定存储空间，也可以为第三方
数据库。
[0160] 在本申请其中一个实施例中，上述获取视频源设备的视频数据中的目标图片信息，可以包括：
[0161] 接收视频源设备发送的目标图片信息。
[0162] 在该实施例中，当视频源设备具有目标图片获取功能(如目标图片抓拍功能或目标检测功能)以及目标图片分析功能时，视频源设备可以直接获取目标图片、目标图片的采集时间以及目标图片的属性信息等目标图片信息，并将目标图片信息发送给搜索设备。
[0163] 搜索设备可以接收视频源设备发送的目标图片信息。
[0164] 例如，假设视频源设备为具有目标图片抓拍功能及目标图片分析功能的IPC，则视频源设备可以抓拍目标图片(并记录目标图片抓拍时间(即采集时间))，并对所抓拍的目标图片进行目标图片分析，以提取目标图片的属性信息，进而，视频源设备可以将目标图片、目标图片的采集时间以及目标图片的属性信息等目标图片信息发送给搜索设备，如NVR，由搜索设备存储所接收到的目标图片、目标图片的采集时间以及目标图片的属性信息等目标图片信息。
[0165] 在本申请另一个实施例中，上述获取视频源设备的视频数据中的目标图片信息，可以包括：
[0166] 接收到视频源设备发送的目标图片及目标图片的采集时间；
[0167] 对目标图片进行建模，并提取目标图片的属性信息。
[0168] 在该实施例中，当视频源设备具有目标图片获取功能(如目标图片抓拍功能或目标检测功能)时，视频源设备可以获取目标图片以及目标图片的采集时间，并将目标图片以及目标图片的采集时间发送给搜索设备。
[0169] 搜索设备接收到视频源设备发送的目标图片以及目标图片的采集时间时，可以对目标图片进行建模，并提取目标图片的属性信息，进而，搜索设备可以获取到视频源设备的视频数据中的目标图片、目标图片的采集时间以及目标图片的属性信息。
[0170] 例如，假设视频源设备为具有目标图片抓拍功能的IPC，则视频源设备可以抓拍目标图片(并记录目标图片抓拍时间(即采集时间))，并将抓拍的目标图片以及目标图片的采集时间发送给搜索设备，如NVR；搜索设备接收到目标图片时，可以对目标图片进行建模，并提取目标图片的属性信息，进而，搜索设备可以存储目标图片、目标图片的采集时间以及目标图片的属性信息。
[0171] 在本申请又一个实施例中，上述获取视频源设备的视频数据中的目标图片信息，可以包括：
[0172] 接收视频源设备发送的目标图片信息、目标图片的采集时间以及目标图片的第一属性信息；
[0173] 对目标图片进行建模，并提取目标图片的第二属性信息；
[0174] 根据目标图片的第一属性信息和目标图片的第二属性信息确定目标图片的属性信息。
[0175] 在该实施例中，当视频源设备具有目标图片获取功能(如目标图片抓拍功能或目标检测功能)以及目标图片分析功能时，视频源设备可以直接获取目标图片、目标图片的采集时间以及目标图片的属性信息(本文中称为目标图片的第一属性信息)，并将目标图片、目标图片的采集时间以及目标图片的第一属性信息发送给搜索设备。
[0176] 搜索设备接收到视频源设备发送的目标图片时，可以对所接收到的目标图片进行建模，并提取目标图片的属性信息(本文中称为目标图片的第二属性信息)。
[0177] 对于任一目标图片，搜索设备可以比较目标图片的第一属性信息和目标图片的第二属性信息，对于第一属性信息中存在，但第二属性信息中不存在的属性信息，或第一属性信息中不存在，但第二属性信息中存在的属性信息，加入到该目标图片的属性信息；对于第一属性信息和第二属性信息中均存在的属性信息，将第二属性信息中的属性信息加入到该目标图片的属性信息，进而，得到该目标图片的属性信息。
[0178] 需要说明的是，在该实施例中，搜索设备也可以直接将目标图片的第二属性信息作为目标图片的属性信息。
[0179] 在本申请的又一实施例中，上述获取视频源设备的视频数据中的目标图片、目标图片的采集时间以及目标图片的属性信息，可以包括：
[0180] 对视频源设备提供的视频数据进行目标检测，以得到视频数据中的目标图片及目标图片的采集时间；
[0181] 对目标图片进行建模，并提取目标图片的属性信息。
[0182] 在该实施例中，当视频源设备不具备目标图片获取功能，或视频源设备与搜索设备为同一设备(如NVR)时，搜索设备可以直接对视频源设备提供的视频数据进行目标检测，以得到视频数据中的目标图片及目标图片的采集时间；搜索设备得到视频数据中的目标图片之后，可以进一步地对目标图片进行建模，并提取目标图片的属性信息。
[0183] 例如，假设视频源设备为不具有目标图片抓拍功能的IPC，视频源设备可以将获取到的视频数据发送给搜索设备，如NVR；搜索设备接收到视频源设备发送的视频数据时，可以对所接收到的视频数据进行目标检测，以得到视频数据中的目标图片及目标图片的采集时间(目标图片在视频数据中出现的时间)，并对目标图片进行建模，提取目标图片的属性信息，进而，搜索设备可以存储目标图片、目标图片的采集时间以及目标图片的属性信息。
[0184] 本申请实施例中，搜索设备获取到视频源设备的视频数据中的目标图片、目标图片的采集时间以及目标图片的属性信息之后，可以存储所获取到的目标图片、目标图片的采集时间以及目标图片的属性信息。
[0185] 进一步地，在本申请实施例中，为了减少冗余图片信息存储，对于同一场景的视频数据中检测出的包括同一目标的多条目标图片信息，若该多条目标图片信息中的目标图片的采集时间相差较小，则可以仅将其中一条目标图片信息保存至图片信息库。
[0186] 相应地，在本申请其中一个实施例中，上述将目标图片信息保存至图片信息库，可以包括：
[0187] 对于任一视频数据通道的任一目标图片信息，判断图片信息库中是否保存有与该目标图片信息包含同一目标的其它目标图片；其中，该其它目标图片信息与该目标图片信息来自同一视频数据通道，且该其它目标图片信息包括的采集时间与该目标图片信息中包括的采集时间的差值小于预设时间阈值；
[0188] 当图片信息库中未保存有与该目标图片信息包含同一目标的其它目标图片信息时，将该目标图片信息保存至图片信息库。
[0189] 在该实施例中，考虑到一个视频数据通道中的视频数据(如一个IPC获取到的视频数据)通常为一个固定场景中的视频数据。
[0190] 因此，对于任一视频数据通道的任一目标图片信息(包括搜索设备对视频源设备提供的视频数据进行目标检测得到，或，搜索设备接收到视频源设备发送的)，搜索设备在将该目标图片信息保存至图片信息库之前，可以判断图片信息库中是否保存有满足以下条件的其它目标图片：
[0191] i)、与目标图片包括同一目标；
[0192] ii)、来自同一视频数据通道；
[0193] iii)、包括的采集时间与目标图片信息中包括的采集时间的差值小于预设阈值。
[0194] 当搜索设备确定图片信息库中不存在满足上述条件的其它目标图片信息时，搜索设备可以将该目标图片信息保存至图片信息库；当搜索设备确定图片信息库中存在满足上述条件的其它目标图片信息时，拒绝将该目标图片信息保存至图片信息库，如直接丢弃该目标图片信息，以减少冗余图片存储，进而，可以减少在图片信息库中进行第一目标图片信息搜索的工作量，并提高搜索效率。
[0195] 本申请实施例中，上述待搜索目标的特征信息可以包括待搜索目标图片和/或待搜索目标图片的属性信息。
[0196] 在本申请其中一个实施例中，上述待搜索目标的特征信息包括待搜索目标图片；
[0197] 相应地，上述搜索与待搜索目标的特征信息匹配的第一目标图片信息，包括：
[0198] 对待搜索目标图片进行建模，并提取待搜索目标图片的属性信息；
[0199] 根据待搜索目标的属性信息在图片信息库中搜索匹配的第一目标图片信息。
[0200] 在该实施例中，搜索设备可以提供目标搜索功能，根据接收到的目标搜索请求中携带的待搜索目标图片，按照以图搜图的方式，搜索匹配的目标图片信息。
[0201] 例如，搜索设备可以提供目标搜索请求界面，该目标搜索请求界面中可以包括待搜索目标图片输入或/和选择区域，由用户在该目标搜索请求界面中输入或/和选择待搜索目标图片，并提交目标搜索请求。
[0202] 搜索设备接收到目标搜索请求时，对待搜索目标图片进行建模，并提取待搜索目标图片的属性信息，进而，搜索设备可以根据待搜索目标图片的属性信息查询所存储的目标图片信息，并将与待搜索目标图片的属性信息匹配的目标图片的属性信息对应的目标图片信息，确定为与该待搜索目标图片的属性信息匹配的目标图片信息(本文中称为第一目标图片信息)。
[0203] 举例来说，假设目标为人脸，待搜索目标的特征信息为人脸图片，则搜索设备接收到目标搜索请求时，可以按照以图搜图的方式搜索匹配的第一目标人脸图片，即对目标搜索请求中携带的人脸图片进行建模，以得到该人脸图片的特征模型，进而，将视频源设备的视频数据中与该人脸图片的特征模型的相似度大于等于预设相似度阈值的人脸图片确定为第一目标人脸图片，并将该第一目标人脸图片和第一目标人脸图片的采集时间作为第一目标人脸图片信息。
[0204] 其中，该相似度阈值可以预先配置在搜索设备中，也可以携带在目标搜索请求中(可以由用户根据实际设置或采用默认值)。
[0205] 在本申请其中一个实施例中，上述待搜索目标的特征信息包括待搜索目标图片和待搜索目标图片的第一属性信息；
[0206] 相应地，上述搜索与待搜索目标的特征信息匹配的第一目标图片信息，包括：
[0207] 对待搜索目标图片进行建模，并提取待搜索目标图片的第二属性信息；
[0208] 根据待搜索目标图片的第一属性信息和待搜索目标图片的第二属性信息，确定待搜索目标图片的属性信息；
[0209] 根据待搜索目标图片的属性信息在图片信息库中搜索匹配的第一目标图片信息。
[0210] 在该实施例中，当目标搜索过滤条件包括待搜索目标图片和待搜索目标图片的第一属性信息时，搜索设备可以对待搜索目标图片进行建模，并提取待搜索目标图片的属性信息(本文中称为待搜索目标图片的第二属性信息)。
[0211] 搜索设备得到待搜索目标图片的第二属性信息之后，可以根据待搜索目标图片的第一属性信息和待搜索目标图片的第二属性信息，确定待搜索目标图片的属性信息。
[0212] 例如，搜索设备可以比较待搜索目标图片的第一属性信息和待搜索目标图片的第二属性信息，对于第一属性信息中存在，但第二属性信息中不存在的属性信息，或第一属性信息中不存在，但第二属性信息中存在的属性信息，加入到该待搜索目标图片的属性信息；对于第一属性信息和第二属性信息中均存在的属性信息，将第二属性信息中的属性信息加入到该待搜索目标图片的属性信息，进而，得到该待搜索目标图片的属性信息。
[0213] 搜索设备得到待搜索目标图片的属性信息时，可以根据待搜索目标图片的属性信息查询图片信息库中的目标图片信息，并将与待搜索目标图片的属性信息匹配的目标图片的属性信息对应的目标图片信息，确定为与该目标搜索过滤条件匹配的第一目标图片信息。
[0214] 需要说明的是，在本申请实施例中，待搜索目标的特征信息也可以为待搜索目标图片的属性信息，搜索设备接收到目标搜索请求时，可以直接根据其中携带的待搜索目标图片的属性信息在图片信息库中搜索匹配的目标图片信息(即第一目标图片信息)。
[0215] 进一步地，在本申请实施例中，为了进一步提高第一目标图片信息的搜索效率，进行目标搜索时，还可以携带特定的过滤属性，以指示搜索设备先根据该特定的过滤属性对图片信息库中的目标图片信息进行过滤后，再进一步进行第一目标图片信息搜索。
[0216] 其中，该特定的过滤属性可以包括但不限于搜索时间段范围或/和搜索通道号等。
[0217] 相应地，在本申请其中一个实施例中，目标搜索请求中还携带有搜索时间段范围；
[0218] 上述搜索与待搜索目标的特征信息匹配的第一目标图片信息，可以包括：
[0219] 根据搜索时间段范围对图片信息库中的目标图片信息进行筛选，以得到采集时间在搜索时间段范围内的目标图片信息；
[0220] 根据待搜索目标的特征信息从采集时间在搜索时间段范围内的目标图片信息中搜索匹配的第一目标图片信息。
[0221] 在该实施例中，当搜索设备接收到目标搜索请求时，搜索设备可以先根据目标搜索请求中携带的搜索时间段范围对图片信息库中的目标图片信息进行筛选，以得到采集时间在搜索时间段范围内的目标图片信息。
[0222] 例如，假设搜索时间段范围为[t1，t2](t2＞t1)，则该搜索时间段段范围内的目标图片信息是指采集时间t满足t1≤t≤t2的目标图片信息。
[0223] 在该实施例中，搜索设备得到了采集时间在搜索时间段范围内的目标图片信息时，可以根据待搜索目标特征信息从采集时间在搜索时间段范围内的目标图片信息中搜索匹配的第一目标图片信息。
[0224] 在本申请另一个实施例中，目标搜索请求中还携带有搜索通道号，目标图片信息还包括有目标图片的通道号(即目标图片所属视频数据通道的通道号)；
[0225] 上述搜索与待搜索目标的特征信息匹配的第一目标图片信息，包括：
[0226] 根据搜索通道号对图片信息库中的目标图片信息进行筛选，以得到通道号与搜索通道号一致的目标图片信息；
[0227] 根据待搜索目标的特征信息从通道号与搜索通道号一致的目标图片信息中搜索匹配的第一目标图片信息。
[0228] 在该实施例中，搜索设备在搜索第一目标图片信息之前，可以先根据搜索通道号以及图片信息库中各目标图片的通道号信息对图片信息库中的目标图片信息进行过滤，以得到通道号与搜索通道号一致的目标图片信息，进而，在该通道号与搜索通道号一致的目标图片信息中搜索第一目标图片信息。
[0229] 进一步地，在本申请实施例中，考虑到当存在多个视频数据通道的视频数据，且多个视频数据通道
覆盖的场景存在重叠(如多个IPC的监控视角范围内存在区域重叠)时，可能会出现同一时间点在多个视频数据通道的视频数据中出现同一目标的情况，此时，为了避免视频摘要中出现相似度过高的视频数据，可以对第一目标图片信息进行去重复处理。
[0230] 相应地，在本申请其中一个实施例中，上述对于任一第一目标图片信息，确定该第一目标图片信息对应的目标录像片段，可以包括：
[0231] 当存在采集时间相同的多条第一目标图片信息时，对于该多条第一目标图片信息中的任一第一目标图片信息，确定该第一目标图片信息对应的录像片段的起始时间点和结束时间点；其中，该起始时间点为该第一目标图片的采集时间之前的第n秒，该结束时间点为该第一目标图片的采集时间之后的第m秒；
[0232] 搜索该第一目标图片所属的视频数据通道的录像数据中是否存在该起始时间点的I帧，以及是否存在该结束时间的I帧；
[0233] 若均存在，则丢弃该多条第一目标图片信息中的其余第一目标图片信息，并将该第一目标图片信息对应的录像片段确定为目标录像片段。
[0234] 在该实施例中，当存在采集时间相同的多条第一目标图片信息时，搜索设备可以按照预设策略确定该多条第一目标图片信息中的各第一目标图片对应的录像片段的起始时间点和结束时间点。
[0235] 其中，对于该多条第一目标图片信息中的任一第一目标图片信息，该第一目标图片信息对应的录像片段的起始时间点为该第一目标图片的采集时间之前的第n秒，结束时间点为该第一目标图片的采集时间之后的第m秒。
[0236] 搜索设备确定了起始时间点和结束时间点之后，可以搜索该第一目标图片所属的视频数据通道的录像数据中是否存在该起始时间点的I帧(即该视频数据通道中是否存在该起始时间点的录像数据)，以及是否存在该结束时间点的I帧(即该视频数据通道中是否存在该结束时间点的录像数据)。
[0237] 若均存在，则搜索设备可以直接将该第一目标图片信息对应的录像片段确定为目标录像片段，并丢弃该多条第一目标图片信息中的其余第一目标图片信息。
[0238] 进一步地，在该实施例中，当该多条第一目标图片信息均不存在起始时间点(该第一图片信息的采集时间之前的第n秒)的I帧或/和结束时间点(该第一图片信息的采集时间之后的第m秒)的I帧时，对于该多个第一目标图片中的任一第一目标图片，若该第一目标图片所属的视频数据通道的录像数据中不存在该起始时间点的I帧，则搜索设备可以将第一目标图片对应的录像片段的起始时间点增加1秒，并搜索是否存在该起始时间点的I帧，若不存在，则再次将该第一目标图片对应的录像片段的起始时间点增加1秒，并搜索是否存在该起始时间点的I帧，重复该操作，直至在该第一目标图片所属的视频数据通道的录像数据中搜索到该起始时间点(更新后的起始时间点)的I帧，或，该第一目标图片对应的录像片段的起始时间点与结束时间点相同。
[0239] 同理，若该第一目标图片所属的视频数据通道的录像数据中不存在该结束时间点的I帧，则搜索设备可以将第一目标图片对应的录像片段的结束时间点减少1秒，并搜索是否存在该结束时间点的I帧，若不存在，则再次将该第一目标图片对应的录像片段的结束时间点减少1秒，并搜索是否存在该结束时间点的I帧，重复该操作，直至在该第一目标图片所属的视频数据通道的录像数据中搜索到该结束时间点(更新后的结束时间点)的I帧，或，该第一目标图片对应的录像片段的起始时间点与结束时间点相同。
[0240] 搜索设备按照上述方式确定了该多个第一目标图片对应的录像片段的起始时间点与结束时间点之后，可以确定该多条第一目标图片信息中对应的录像片段的时长最长(结束时间点与起始时间点的差值最大)的第一目标图片信息，将该第一目标图片信息对应的录像片段确定为目标录像片段，并丢弃该多条第一目标图片信息中的其余第一目标图片信息。
[0241] 需要说明的是，在该实施例中，当该多条第一目标图片信息中对应的录像片段的时长最长的第一目标图片信息的数量大于1时，按照预设策略从其中选择一个第一目标图片信息，并将所选择的第一目标图片信息对应的录像片段确定为目标录像片段。
[0242] 例如，可以选择起始时间点最早的第一目标图片信息、选择结束时间最晚的第一目标图片信息或随机选择。
[0243] 此外，在本申请实施例中，当存在采集时间相同的多个第一目标图片信息，也可以通过手动的方式实现该多个第一目标图片信息的去重复处理。
[0244] 例如，搜索设备可以将该多个第一目标图片信息展示在指定界面中，由用户选择需要保留的第一目标图片信息，并将其余采集时间相同的第一目标图片信息丢弃。
[0245] 进一步地，在本申请实施例中，考虑到当存在多个第一目标图片时，各第一目标图片对应的目标录像片段的时间段可能会存在重叠，进而影响视频摘要的正常播放，因此，为了优化视频摘要的播放效果，可以对各目标录像片段进行去重复时间处理。
[0246] 相应地，在本申请其中一个实施例中，上述根据各目标录像片段生成视频摘要，可以包括：
[0247] 根据各目标录像片段的起始时间点和结束时间点对目标录像片段进行过滤，以去除重复时间的录像数据；
[0248] 根据过滤后的目标录像片段生成视频摘要。
[0249] 在该实施例中，搜索设备确定了各第一目标图片对应的目标录像片段之后，可以根据各目标录像片段的起始时间点和结束时间点对目标录像片段进行过滤，以去除重复时间的录像数据。
[0250] 在一个示例中，上述根据各目标录像片段的起始时间点和结束时间点对目标录像片段进行过滤，包括：
[0251] 按照各目标录像片段的起始时间点对各目标录像片段进行排序；
[0252] 对于相邻的第一目标录像片段和第二目标录像片段，当第一目标录像片段的结束时间点大于等于第二目标录像片段的起始时间点时，
[0253] 若第一目标录像片段和第二目标录像片段属于同一视频数据通道，则将第一目标录像片段和第二目标录像片段合并，合并后的录像片段的起始时间点为第一目标录像片段的起始时间点，结束时间点为第二目标录像片段的结束时间点；
[0254] 若第一目标录像片段和第二目标录像片段属于不同视频数据通道，则以第一目标录像片段的结束时间点作为第二目标录像片段的起始时间点，或，以第二目标片段的起始时间点作为第一目标录像片段的结束时间点。
[0255] 具体地，在该示例中，搜索设备可以按照各目标录像片段的起始时间点对各目标录像片段进行排序。
[0256] 例如，搜索设备可以根据各目标录像片段的起始时间点，利用冒泡排序方式，将各目标录像片段进行排序。
[0257] 对于相邻的两个目标录像片段(本文中称为第一目标录像片段和第二目标录像片段，第一目标录像片段的起始时间点小于第二目标录像片段的起始时间点)，当第一目标录像片段的结束时间点大于等于第二目标录像片段的起始时间点时，
[0258] 若第一目标录像片段和第二目标录像片段属于同一视频数据通道，则搜索设备可以将第一目标录像片段和第二目标录像片段合并；其中，合并后的录像片段的起始时间点为第一目标录像片段的起始时间点，结束时间为第二目标录像片段的结束时间点。
[0259] 若第一目标录像片段和所述第二目标录像片段属于不同视频数据通道，则搜索设备可以以第一目标录像片段的结束时间点作为第二目标录像片段的起始时间点，或，搜索设备可以以第二目标片段的起始时间点作为第一目标录像片段的结束时间点，其具体实现将在下文中结合具体实例进行说明。
[0260] 为了使本领域技术人员更好地理解本申请实施例提供的技术方案，下面结合具体实例对本申请实施例提供的技术方案进行说明。
[0261] 在该实施例中，以搜索设备为NVR，视频源设备为IPC，目标为人脸，目标搜索为人脸图片搜索为例，视频摘要生成方案的具体实现流程如下：
[0263] 1)、若NVR接入普通IPC，NVR可以利用通过GPU(Graphics Processing Unit，
图形处理单元)结构化视频分析技术对IPC传输的实时
视频流进行人脸识别，以得到实时视频流中的人脸图片信息；
[0264] 若NVR接入专业人脸抓拍IPC，则NVR可以从IPC端接收人脸图片信息；
[0265] 其中，人脸图片信息可以包括但不限于人脸图片、人脸图片的结构化信息、人脸图片的采集时间、人脸图片的通道号以及人脸图片的通道名称(用于记录地址信息)等。
[0266] 2)、NVR为IPC和NVR之间的每个视频数据通道(简称通道)维护一个缓冲区，用于存放3秒内收到的人脸图片信息；
[0267] 其中，当人脸图片信息在该缓冲区中存放的时间达到3秒时，NVR将该人脸图片从该缓冲区中删除。
[0268] 3)、对于任一通道，当NVR从该通道中获取到新的人脸图片信息(包括直接从IPC中接收到的人脸图片信息或通过
人脸检测得到的人脸图片信息)，将该人脸图片信息与该通道对应的缓冲区中的人脸图片信息进行比对，若该缓冲区中存在同一人脸的人脸图片信息，则将该新获取到的人脸图片信息丢弃，或者，可以将该人脸图片信息加入到缓冲区，并保存至图片信息库。
[0269] 需要说明的是，若NVR获取到新的人脸图片信息，且确定缓冲区中不存在同一人脸的人脸图片信息，但该缓冲区中不存在空闲空间，则NVR可以将该新获取到的人脸图片信息覆盖最早存入缓冲区中的人脸图片信息，并将该新获取到的人脸图片信息保存至图片信息库。
[0270] 其中，NVR进行人脸识别和图片存储的流程示意图可以如图3所示。
[0271] 2、录像融合参数配置
[0272] 可配置的录像融合参数可以包括但不限于：
[0273] 1)、通道选择：若选择单通道，代表单通道人脸图片信息搜索以及录像融合；若勾选指定的多个通道，代表多个通道的人脸图片信息搜索以及多通道录像融合；
[0274] 2)、搜索时间段范围：代表要搜索匹配哪个时间段范围内的人脸图片信息；
[0275] 3)、相似度阈值：如阈值为90％，代表相似度结果为90％及以上才认为人脸图片匹配成功；
[0276] 4)、录像融合时间段：即人脸图片的采集时间前n秒以及后m秒的范围参数，如配置前2(即n＝2)秒、后3(即m＝3)秒，代表需要截取该人脸图片的采集时间之前2秒以及该人脸图片的采集时间之后3s的时间范围内的录像片段；
[0277] 5)、重复图片过滤模式：分为自动和手动两种模式，不同模式的处理方式在第3点中阐述。
[0278] 3、重复图片过滤
[0279] 1)、NVR接收人脸搜索请求，该人脸搜索请求中携带有目标人脸图片以及录像融合参数；
[0280] 2)、以图搜图：NVR对目标人脸图片进行建模，对图片信息库中与人脸搜索请求中携带的通道号以及搜索时间段范围匹配的人脸图片信息进行搜索比对，计算相似度，列出与目标人脸图片相似度大于等于相似度阈值的人脸图片信息(下文中称为第一人脸图片信息)，形成第一人脸图片信息列表；
[0281] 3)、按各第一人脸图片信息中的采集时间从早到晚的顺序，对第一人脸图片信息列表中各第一人脸图片进行排序；
[0282] 4)、若存在多个第一人脸图片信息中的采集时间一致(当多个IPC的视角范围有区域重叠时，可能会出现多个第一人脸图片的采集时间一致的情况)，对该多个第一人脸图片信息进行重复图片过滤；
[0283] 其中，对于该多个第一人脸图片信息中的任一第一人脸图片信息，将该第一人脸图片的采集时间减去n秒，得到该第一人脸图片信息对应的录像片段的起始时间点x，并将该第一人脸图片的采集时间加上m秒，得到该第一人脸图片信息对应的录像片段的结束时间点y；
[0284] NVR分别在该通道的视频录像中搜索x和y这两个时间点的I帧，若时间点x不存在I帧，或/和，时间点y不存在I帧，则令x＝x+1，或/和，令y＝y-1，并继续搜索时间点x或/和y这两个时间点的I帧，直至找到时间点x和时间点y的I帧，或，x＝y。
[0285] 其中，当x＝y时，代表该第一人脸图片信息对应的录像片段的时长为1秒。
[0286] 5)、重复图片过滤模式包括手动过滤模式或自动过滤模式，其中：
[0287] a)、手动过滤模式：在指定界面输出该多个第一人脸图片信息，由用户勾选确认要保留的第一人脸图片信息，其他相同采集时间的第一人脸图片信息丢弃；
[0288] b)、自动过滤模式：将该多个第一人脸图片信息中，对应的录像片段最长的第一人脸图片信息保留，其它相同采集时间的第一人脸图片信息丢弃；
[0289] 其中，当该多个第一人脸图片信息中，对应的录像片段最长的第一人脸图片信息存在多条时，保留其中一条，其余丢弃。
[0290] 6)、将重复图片过滤后的第一人脸图片信息形成最终的第一人脸图片信息列表。
[0291] 其中，NVR生成最终的第一人脸图片信息列表的流程示意图可以如图4所示。
[0292] 4、重复录像片段过滤
[0293] 1)、基于最终的第一人脸图片信息列表，创建一个录像片段时间段元素集合，每一个元素包括如下信息：
[0294] 第一人脸图片所属通道的通道号、第一人脸图片信息对应的录像片段的起始时间点(存在I帧的起始时间点)以及第一人脸图片信息对应的录像片段的结束时间点(存在I帧的结束时间点)；
[0295] 其中，各元素按照起始时间点从早到晚的顺序排序。
[0296] 2)、重复录像片段过滤：
[0297] 对于录像片段时间段元素集合相邻的两个元素(下文中分别称为第一元素和第二元素)；
[0298] 假设第一元素和第二元素的起始时间点和结束时间点分别为[A，B]和[C，D]；其中，A＜C；
[0299] a)、若第一元素和第二元素包括的通道号相同，且C≤B，则将第一元素和第二元素合并为1个元素，该元素的起始时间点为A，结束时间点为D；
[0300] b)、若第一元素和第二元素包括的通道号不同，且C≤B，则判断第二元素所属通道的视频录像中是否存在时间点B的I帧；
[0301] 若存在，则将第二元素的起始时间点更新为B，即第一元素和第二元素的起始时间点和结束时间点分别为[A，B]和[B，D]；
[0302] 若不存在，则将第一元素的起始时间点更新为C，即第一元素和第二元素的起始时间点和结束时间点分别为[A，C]和[C，D]。
[0303] 3)、遍历整个录像片段时间段元素集合，最终形成用于生成视频摘要的录像片段元素集合。
[0304] 5、视频摘要生成
[0305] 基于用于生成视频摘要的录像片段元素集合，从对应通道的视频录像中获取对应的录像数据，并根据所获取到的录像数据生成视频摘要。
[0306] 其中，该视频摘要支持用户下载，且用户可以导出用于生成视频摘要的录像片段元素集合。
[0307] 本申请实施例中，通过接收目标搜索请求，搜索与该目标搜索请求中携带的待搜索目标的特征信息匹配的第一目标图片信息，并根据各第一目标图片信息生成待搜索目标的视频摘要，提高了在视频录像中定位目标的效率和准确性，在去除与待搜索目标不匹配的视频录像的基础上，保证了目标视频跟踪的连贯性。
[0308] 以上对本申请提供的方法进行了描述。下面对本申请提供的装置进行描述：
[0309] 请参见图5，为本申请实施例提供的一种视频摘要生成装置的结构示意图，其中，该视频摘要生成装置可以应用于上述实施例中的搜索设备，如图5所示，该视频摘要生成装置可以包括：
[0310] 接收单元510，用于接收目标搜索请求，所述目标搜索请求中携带有待搜索目标的特征信息；
[0311] 搜索单元520，用于搜索与所述待搜索目标的特征信息匹配的第一目标图片信息；其中，所述第一目标图片信息包括第一目标图片和第一目标图片的采集时间；
[0312] 处理单元530，用于根据所述第一目标图片信息生成视频摘要。
[0313] 在一种可选的实施方式中，如图6所示，所述装置还包括：
[0314] 获取单元540，用于获取视频源设备的视频数据中的目标图片信息，所述目标图片信息包括目标图片、目标图片的采集时间以及目标图片的属性信息；
[0315] 保存单元550，用于将所述目标图片信息保存至图片信息库。
[0316] 在一种可选的实施方式中，所述获取单元540，具体用于接收所述视频源设备发送目标图片信息。
[0317] 在一种可选的实施方式中，所述获取单元540，具体用于接收所述视频源设备发送的目标图片及目标图片的采集时间；对所述目标图片进行建模，并提取所述目标图片的属性信息。
[0318] 在一种可选的实施方式中，所述获取单元540，具体用于接收所述视频源设备发送的目标图片信息、目标图片的采集时间以及目标图片的第一属性信息；对所述目标图片进行建模，并提取所述目标图片的第二属性信息；根据所述目标图片的第一特征信息和所述目标图片的第二属性信息确定所述目标图片的属性信息。
[0319] 在一种可选的实施方式中，所述获取单元540，具体用于对所述视频源设备提供的视频数据进行目标检测，以得到所述视频数据中的目标图片及目标图片的采集时间；对所述目标图片进行建模，并提取所述目标图片的属性信息。
[0320] 在一种可选的实施方式中，所述保存单元550，具体用于对于任一视频数据通道的任一目标图片信息，判断所述图片信息库中是否保存有与该目标图片信息包含同一目标的其它目标图片信息；其中，该其它目标图片信息与该目标图片信息来自同一视频数据通道，且该其它目标图片信息包括的采集时间与该目标图片信息中包括的采集时间的差值小于预设时间阈值；
[0321] 当所述图片信息库中未保存有与该目标图片信息包含同一目标的其它目标图片信息时，将该目标图片信息保存至所述图片信息库；
[0322] 当所述图片信息库中保存有与该目标图片信息包含同一目标的其它目标图片信息时，拒绝将该目标图片信息保存至所述图片信息库。
[0323] 在一种可选的实施方式中，所述待搜索目标的特征信息包括待搜索目标图片；
[0324] 所述搜索单元520，具体用于对所述待搜索目标图片进行建模，并提取所述待搜索目标图片的属性信息；根据所述待搜索目标的属性信息在所述图片信息库中搜索匹配的第一目标图片信息。
[0325] 在一种可选的实施方式中，所述待搜索目标的特征信息包括待搜索目标图片和待搜索目标图片的第一属性信息；
[0326] 所述搜索单元520，具体用于对所述待搜索目标图片进行建模，并提取所述待搜索目标图片的第二属性信息；根据所述待搜索目标图片的第一属性信息和所述待搜索目标图片的第二属性信息，确定所述待搜索目标图片的属性信息；根据所述待搜索目标图片的属性信息在所述图片信息库中搜索匹配的第一目标图片信息。
[0327] 在一种可选的实施方式中，所述目标搜索请求中还携带有搜索时间段范围；
[0328] 所述搜索单元520，具体用于根据所述搜索时间段范围对所述图片信息库中的目标图片信息进行筛选，以得到采集时间在所述搜索时间段范围内的目标图片信息；
[0329] 根据所述待搜索目标的特征信息从所述采集时间在所述搜索时间段范围内的目标图片信息中搜索匹配的第一目标图片信息。
[0330] 在一种可选的实施方式中，所述目标搜索请求中还携带有搜索通道号，所述目标图片信息还包括有目标图片的通道号；
[0331] 所述搜索单元520，具体用于根据所述搜索通道号对所述图片信息库中的目标图片信息进行筛选，以得到通道号与所述搜索通道号一致的目标图片信息；
[0332] 根据所述待搜索目标的特征信息从所述通道号与所述搜索通道号一致的目标图片信息中搜索匹配的第一目标图片信息。
[0333] 在一种可选的实施方式中，所述处理单元530，具体用于根据按采集时间从早到晚的顺序排序后的所述第一目标图片，生成视频摘要。
[0334] 在一种可选的实施方式中，所述处理单元530，具体用于对于任一第一目标图片信息，确定该第一目标图片信息对应的目标录像片段；其中，该目标录像片段为该第一目标图片的采集时间之前的第n秒以及该第一目标图片的采集时间之后的第m秒之间的录像数据；根据各目标录像片段生成视频摘要。
[0335] 在一种可选的实施方式中，所述处理单元530，具体用于当存在采集时间相同的多条第一目标图片信息时，对于该多条第一目标图片信息中的任一第一目标图片信息，确定该第一目标图片信息对应的录像片段的起始时间点和结束时间点；其中，该起始时间点为该第一目标图片的采集时间之前的第n秒，该结束时间点为该第一目标图片的采集时间之后的第m秒；搜索该第一目标图片所属的视频数据通道的录像数据中是否存在该起始时间点的I帧，以及是否存在该结束时间的I帧；若均存在，则丢弃该多条第一目标图片信息中的其余第一目标图片信息，并将该第一目标图片信息对应的录像片段确定为目标录像片段。
[0336] 在一种可选的实施方式中，所述处理单元530，还用于若不存在该起始时间点的I帧，则将该第一目标图片对应的录像片段的起始时间点增加1秒，并重复上述搜索步骤，直至在该第一目标图片所属的视频数据通道的录像数据中搜索到该起始时间点的I帧，或，该第一目标图片对应的录像片段的起始时间点与结束时间点相同；若不存在该结束时间点的I帧，则将该第一目标图片对应的录像片段的结束时间点减少1秒，并重复上述搜索步骤，直至在该第一目标图片所属的视频数据通道的录像数据中搜索到该结束时间点的I帧，或，该第一目标图片对应的录像片段的起始时间点与结束时间点相同；确定该多条第一目标图片信息中对应的录像片段的时长最长的第一目标图片信息，将该第一目标图片信息对应的录像片段确定为目标录像片段，并丢弃该多条第一目标图片信息中的其余第一目标图片信息。
[0337] 在一种可选的实施方式中，所述处理单元530，具体用于根据各目标录像片段的起始时间点和结束时间点对目标录像片段进行过滤，以去除重复时间的录像数据；根据过滤后的目标录像片段生成视频摘要。
[0338] 在一种可选的实施方式中，所述处理单元530，具体用于按照各目标录像片段的起始时间点对各目标录像片段进行排序；
[0339] 对于相邻的第一目标录像片段和第二目标录像片段，当所述第一目标录像片段的结束时间点大于等于所述第二目标录像片段的起始时间点时，
[0340] 若所述第一目标录像片段和所述第二目标录像片段属于同一视频数据通道，则将所述第一目标录像片段和所述第二目标录像片段合并，合并后的录像片段的起始时间点为所述第一目标录像片段的起始时间点，结束时间点为所述第二目标录像片段的结束时间点；
[0341] 若所述第一目标录像片段和所述第二目标录像片段属于不同视频数据通道，则以所述第一目标录像片段的结束时间点作为所述第二目标录像片段的起始时间点，或，以所述第二目标片段的起始时间点作为所述第一目标录像片段的结束时间点；
[0342] 其中，所述第一目标录像片段的起始时间点小于所述第二目标录像片段的起始时间点
[0343] 请参见图7，为本申请实施例提供的一种电子设备的硬件结构示意图。该电子设备可以包括处理器701、通信接口702、存储器703和通信总线704。处理器701、通信接口702以及存储器703通过通信总线704完成相互间的通信。其中，存储器703上存放有计算机程序；处理器701可以通过执行存储器703上所存放的程序，执行上文描述的视频摘要生成方法。
[0344] 本文中提到的存储器703可以是任何电子、
磁性、光学或其它物理存储装置，可以包含或存储信息，如可执行指令、数据，等等。例如，存储器702可以是：RAM(Radom Access Memory，
随机存取存储器)、易失存储器、
非易失性存储器、闪存、存储
驱动器(如硬盘驱动器)、固态硬盘、任何类型的存储盘(如光盘、dvd等)，或者类似的存储介质，或者它们的组合。
[0345] 本申请实施例还提供了一种存储有计算机程序的机器可读存储介质，例如图7中的存储器703，所述计算机程序可由图7所示电子设备中的处理器701执行以实现上文描述的视频摘要生成方法。
[0346] 需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
[0347] 以上所述仅为本申请的较佳实施例而已，并不用以限制本申请，凡在本申请的精神和原则之内，所做的任何
修改、等同替换、改进等，均应包含在本申请保护的范围之内。
