1.一种针对视频直播中背景音乐侵权行为的监测方法,其特征在于,所述监测方法包括直播拉流、视频切分和音频检测三个步骤;
直播拉流程序执行直播拉流作业的流程包括如下步骤:
S1‑1.创建帧抓取器并传入直播流地址,初始化帧抓取器文件地址属性、像素格式化属性和样本格式化属性的值,实例化帧抓取器对象;
S1‑2.调用帧抓取器对象的启动函数,初始化视频参数,开启帧抓取器工作;
S1‑3.调用帧抓取器对象的帧抓取函数,获取帧数据;
S1‑4.创建并初始化帧录制器,传入预定的视频文件存储地址、图像宽度、图像高度和音频通道数,实例化帧录制器对象;
S1‑5.调用帧录制器对象的启动函数,初始化图片缓存属性、音频输出缓存属性和视频输出缓存属性的值,开启帧录制器工作;
S1‑6.判定S1‑3获取的帧数据是否为空,如果为空,则执行S1‑11;如果不为空,则进入循环体并执行S1‑7;
S1‑7.在循环体内,调用帧录制器对象的录制函数,并将S1‑3获取的帧数据作为输入参数;
S1‑8.在循环体内,调用帧抓取器对象的帧抓取函数获取帧数据;
S1‑9.在循环体内,判定S1‑8获取的帧数据是否为空,如果不为空,则进入下一轮循环,重复执行S1‑7和S1‑8;如果为空,则跳出循环并执行S1‑10;
S1‑10.通过消息队列推送含有视频文件存储地址的消息到视频切分程序;
S1‑11.调用帧录制器对象和帧抓取器对象的停止函数,停止帧录制器和帧抓取器工作;
视频切分程序通过消息队列接收到含有视频文件存储地址的消息后,通过执行视频切分作业和远程调用音频检测方法切分视频,流程包括如下步骤:S2‑1.创建帧抓取器并传入视频文件存储地址,初始化帧抓取器文件地址属性、像素格式化属性和样本格式化属性的值,实例化帧抓取器对象;
S2‑2.调用帧抓取器对象的启动函数,初始化视频参数,开启帧抓取器工作;
S2‑3.创建并初始化帧录制器,传入预定的视频分片文件存储地址、图像宽度、图像高度和音频通道数,实例化帧录制器对象;
S2‑4.调用帧录制器对象的启动函数,初始化图片缓存属性、音频输出缓存属性和视频输出缓存属性的值,开启帧录制器工作;
S2‑5.调用Java开发工具包的链表创建函数实例化链表对象,创建动态滑动窗口,窗口大小以时间为单位;
S2‑6.创建用于记录窗口移动的时间步长;
S2‑7.创建帧探针器并实例化探针对象,调用探针对象的探测函数并传入视频文件存储地址,解析视频参数并返回视频帧率fps;
S2‑8.判定时间步长是否小于视频时长,如果不是,则执行S2‑23;如果是,则进入循环体执行S2‑9;
S2‑9.在循环体内,根据公式ET=ST+DT计算动态滑动窗口起止位置对应的时间,其中ET表示结束位置对应的时间,ST表示起始位置对应的时间,DT表示窗口大小对应的时间跨度;
S2‑10.在循环体内,结合S2‑7获取的fps,根据公式fp=fps×t计算动态滑动窗口起始位置对应的帧数、结束位置对应的帧数和窗口大小对应的帧数跨度,其中fp表示帧数,t表示时间;
S2‑11.在循环体内,创建用于记录帧数的计数器fc并初始化为0;
S2‑12.在循环体内,判断计数器是否小于窗口大小对应的帧数跨度,如果是,则进入内循环体执行S2‑13;如果不是,则执行S2‑17;
S2‑13.在内循环体内,调用帧抓取器对象的帧抓取函数,获取帧数据;
S2‑14.在内循环体内,调用帧录制器对象的录制函数并传入帧数据,将帧数据写入视频分片数据流;
S2‑15.在内循环体内,更新计数器的值,计算公式为:fc=fc+1;
S2‑16.在内循环体内,判断计数器是否小于窗口对应的帧数跨度,如果是,则重复执行S2‑13~S2‑15;如果不是,则跳出内循环体,执行S2‑17;
S2‑17.在循环体内,把含有视频分片数据流的消息通过消息队列发送给音频检测程序;
S2‑18.音频检测程序通过消息队列接收到含有视频分片数据流的消息后,执行音频检测作业,并将检测结果返回给视频切分程序;
S2‑19.在循环体内,判定S2‑18检测结果是否疑似侵权,如果是,则通过调用帧录制器对象的文件写入函数将视频分片数据流保存为视频分片文件;
S2‑20.在循环体内,移动滑动窗口;
S2‑21.在循环体内,判定时间步长是否小于视频时长,如果是,则重复执行S2‑9~S2‑
20;如果不是,则跳出循环体;
S2‑22.调用帧录制器对象和帧抓取器对象的停止函数,停止帧录制器和帧抓取器工作,完成视频切分和音频检测工作。
2.如权利要求1所述的监测方法,其特征在于,步骤S1‑2、S2‑2中,视频参数包括视频采样率、音频声道、视频帧率和图像大小。
3.如权利要求1所述的监测方法,其特征在于,步骤S2‑5中,窗口大小的默认值为30秒。
4.如权利要求1所述的监测方法,其特征在于,步骤S2‑6中,时间步长,默认值为0秒。
5.如权利要求1所述的监测方法,其特征在于,步骤S2‑20中,以秒为单位移动滑动窗口,默认值10秒。
6.如权利要求1所述的监测方法,其特征在于,直播拉流、视频切分和音频检测均以多线程方式并行计算。
7.如权利要求6所述的监测方法,其特征在于,直播拉流程序、视频切分程序和音频检测程序均有各自的线程池,不同程序之间线程通信先通过队列,程序订阅队列后将收到队列消息,此时从线程池寻找空闲线程,将作业赋予空闲线程执行;若找不到空闲线程,则程序不消费队列消息,若队列已满,则以先进先出的原则将队列中等待时间最长的消息丢弃。
8.如权利要求6所述的监测方法,其特征在于,多线程并行计算包括如下步骤:(1)定义程序作业,作业包括直播拉流作业、视频切分作业和音频检测作业;
(2)创建直播拉流类函数、视频切分类函数和音频检测类函数;
(3)导入多线程组件执行器服务包和执行器工具包;
(4)在(2)创建的类函数函数体内创建线程池,通过调用执行器工具类静态函数新建线程池,并将线程数作为输入参数,其中新建线程池静态函数表示以固定线程数的方式实例化执行器对象;
(5)调用实例化执行器对象的提交函数,提交直播拉流作业、视频切分作业和音频检测作业;
(6)调用Java开发工具包原生套接字函数,创建套接字对象,套接字函数接收地址族或协议族、套接字类型、传输协议;
(7)调用套接字对象的绑定函数,绑定ip地址、端口,以及直播拉流、视频切分和音频检测类函数;
(8)调用套接字对象的监听函数,将一个套接字处于监听连接请求的状态。