安徽新一代语音关键事件检测介绍

时间:2022年06月21日 来源:

    将w2与w4进行横向拼接得到终的语义表示w3,w3的维度可以为[n,2*d1]。在本申请的示例性实施例中,自注意力机制计算具体可以包括:将w2分别进行多次(如三次)线性变换得到w21、w22、w23,然后可以执行矩阵相乘运算得到w4=(w22*w23t)*w21,w3=w2||w4。s105、对所述新的语义表示w3进行span分类,确定每个span是否为一个事件的触发词或事件主体。在本申请的示例性实施例中,所述对所述新的语义表示w3进行span分类可以包括:使用两层全连接神经网络和softmax层对每个span进行分类;其中,在训练阶段,将分类结果与带有标记的span进行误差计算和反向传播。在本申请的示例性实施例中,得到步骤s104的span的表示w3后,可以使用两层全连接神经网络和softmax层对span进行分类。在本申请的示例性实施例中,如果如步骤s101中所述,预先对数据进行了预处理,即预先对数据进行了span分类和标记,则在训练阶段,可以将分类结果与预处理过程所得的带有标记的span进行误差计算和反向传播,并进行参数更新操作完成训练过程。在本申请的示例性实施例中,在预测阶段,根据分类的结果即可得到每个span的类型。softmax的输出是每个span所属对应类型(预处理过程获得的带类型标记的span)的概率。语音关键事件检测受哪些因素影响?安徽新一代语音关键事件检测介绍

安徽新一代语音关键事件检测介绍,语音关键事件检测

    便可以得到一个第二样本图像组及样本图像组的事件检测结果。实施例三:上述步骤f2,基于场景图像检测模型输出的检测结果,确定关于目标防护舱的事件检测结果,可以包括以下步骤f21-f23:步骤f21:将至少包含光流图在内的第二类图像确定为辅助图像,第二类图像中各个图像的类型均为:基于每两帧连续的关于所述目标防护舱且包括所述目标对象的图像获取的光流图,光流图为当前帧图像对应的光流图;步骤f22:将辅助图像输入到预设的光流图检测模型中,得到光流图检测模型输出的检测结果;其中,光流图检测模型为:采用各个第二样本图像组和每个第二样本图像组的事件检测结果所训练得到的模型,且每一第二样本图像组中的图像与待分析图像的图像数据相同,各个第二样本图像组中的图像为:关于防护舱的光流图;步骤f23:将场景图像检测模型输出的检测结果和光流图检测模型输出的检测结果进行融合计算,基于融合计算的结果,确定关于目标防护舱的事件检测结果。也就是说,在本实施例三中,可以同时利用场景图像检测模型对类图像进行检测,得到一个检测结果,利用光流图检测模型对第二类图像进行检测,得到另一个检测结果,进而,将两个检测结果进行融合计算,并基于融合计算的结果。广州信息化语音关键事件检测介绍语音关键事件检测的难点有哪些?

安徽新一代语音关键事件检测介绍,语音关键事件检测

    基于光流图检测模型输出的检测结果,确定关于目标防护舱的事件检测结果,可以包括以下步骤g21-g23:步骤g21:将至少包含当前帧图像的类图像确定为辅助图像;步骤g22:将辅助图像输入到预设的场景检测模型中,得到场景检测模型输出的检测结果;步骤g23:将场景图像检测模型输出的检测结果和光流图检测模型输出的检测结果进行融合计算,基于融合计算的结果,确定当前时刻,关于目标防护舱的事件检测结果。其中,关于类图像的相关描述内容、场景检测模型的相关描述内容、场景图像检测模型输出的检测结果和光流图检测模型输出的检测结果进行融合的融合过程等,可以参见上述的以第二类图像作为辅助图像时的相关描述内容。相对应上述本发明实施例提供的一种事件检测方法,本发明实施例还提供了一种事件检测装置。图6为本发明实施例提供的一种事件检测装置的结构示意图,如图6所示,该装置可以包括如下模块:图像获取模块610,用于实时获取关于目标防护舱的图像,并将当前时刻所采集到的图像作为当前帧图像;图像检测模块620,用于检测当前帧图像是否包含目标对象,其中,目标对象为:能够表征用户进入目标防护舱的用户身体部位;如果是,触发图像确定模块;图像确定模块630。

    控制器12分别与n个摄像头11以及m个第二摄像头14通信连接,从而可以获取n个摄像头11实时采集的图像以及m个第二摄像头14实时采集的图像。下面对本实用新型实施例中提供的溺水事件检测系统的工作原理进行说明。由本实用新型上述实施例中可知,控制器12可以接收到n个摄像头11以及m个第二摄像头14实时采集的图像。控制器12可以根据n个摄像头11采集到的图像,从中识别出目标人物,进而获取目标人物在游泳池中的具置。具体的识别目标人物的算法可以参照现有的人脸识别算法,本实用新型实施例不做赘述。在具体实施中,在检测到目标人物之后,控制器12可以对目标人物进行,以实时获取目标人物的图像。在对目标人物进行的过程中,控制器12可以实时获取目标人物相对于游泳池水面的沉浮频率。人物算法以及沉浮频率统计方法均可以采用现有的方法进行。例如,在实际应用中可知,游泳者在游泳时,需要频繁露出水面换气。当游泳者露出水面时,可以视为游泳者浮出水面;当游泳者潜水时,可以视为游泳者沉入水面。因此,控制器12可以根据目标人物的浮出水面的频率和沉入水面的频率,确定目标人物相对于游泳池水面的沉浮频率。在具体实施中,控制器12可以根据多个摄像头11采集到的图像。语音关键事件检测一般设置在哪些地方?

安徽新一代语音关键事件检测介绍,语音关键事件检测

    本发明实施例提供的一种事件检测方法,包括如下步骤:s300:实时获取关于目标防护舱的图像,并将当前时刻所采集到的图像作为当前帧图像;其中,目标防护舱指代的是需要进行事件检测的防护舱,并不具有任何其他限定意义。目标防护舱所对应的目标图像采集设备,实时对目标防护舱的内部空间进行图像采集,并将得到的关于目标防护舱的图像实时传输给的目标防护舱所对应的电子设备。这样,电子设备便可以实时获取关于目标防护舱的图像。其中,可以理解的,关于目标防护舱的图像可以为目标防护舱内部空间的图像。也就是说,上述目标图像采集设备可以在每个时刻采集关于目标防护舱的图像,进而,电子设备可以在每个时刻获得在该时刻时,关于目标防护舱的图像,该图像显示了每个时刻目标防护舱的内容空间的情况。则在当前时刻,电子设备所获得的关于目标防护舱的图像即为在当前时刻,目标图像采集设备所采集的关于目标防护舱的图像,这样,电子设备可以将该图像作为当前帧图像。显然,电子设备可以基于当前帧时刻,确定当前时刻,关于目标防护舱的事件检测结果。s301:检测当前帧图像是否包含目标对象,如果是,执行步骤s303;其中。语音关键事件检测发展如何?浙江自主可控语音关键事件检测内容

语音关键事件检测有什么用?安徽新一代语音关键事件检测介绍

    光流图检测模型为:采用各个第二样本图像组和每个第二样本图像组的事件检测结果所训练得到的模型,且每一第二样本图像组中包括n+1帧光流图。第二种情况:待分析图像为:当前帧图像和当前帧图像之前的连续m帧图像的多张图像;场景图像检测模型为:采用各个样本图像组和每个样本图像组的事件检测结果所训练得到的模型,且每一样本图像组中包括m+1帧场景图像;辅助图像为:光流图;光流图检测模型为:采用各个第二样本图像和每个第二样本图像的事件检测结果所训练得到的模型,且每个第二样本图像为一帧光流图。第三种情况:待分析图像为:当前帧图像;场景图像检测模型为:采用各个样本图像和每个样本图像的事件检测结果所训练得到的模型,且每个样本图像为一帧场景图像;辅助图像为:包括光流图和光流图之前的连续n帧光流图的多张图像;光流图检测模型为:采用各个第二样本图像组和每个第二样本图像组的事件检测结果所训练得到的模型,且每一第二样本图像组中包括n+1帧光流图。第四种情况:待分析图像为:当前帧图像;场景图像检测模型为:采用各个样本图像和每个样本图像的事件检测结果所训练得到的模型,且每个样本图像为一帧场景图像;辅助图像为:光流图。安徽新一代语音关键事件检测介绍

信息来源于互联网 本站不为信息真实性负责