1.一种基于无线传输的USB数据截取处理系统,其特征在于,所述系统包括:主机、下位机USB数据截取装置及若干个从机,下位机USB数据截取装置上设有微控制器、USB接口端、以太网/局域网模块、随机缓存器及数据存储器,下位机USB数据截取装置通过USB接口端连接主机,向主机发送请求通信指令,主机识别下位机USB数据截取装置,并向下位机USB数据截取装置的数据存储器写入文件数据,在文件数据写入数据存储器之前,微控制器拷贝文件数据,然后对文件数据加工处理,以缓存循环队列的方式将文件数据写入随机缓存器中,实现USB数据截取,原始文件数据保存至数据存储器;所述若干个从机接入下位机USB数据截取装置的局域网,加工处理后的文件数据通过以太网/局域网模块无线传输至若干个从机中,每一个从机接收到文件数据后,对数据进行二次处理,最后写入本地;
每一个从机上的上位机系统通过TCP/IP模块确认与下位机USB数据截取装置的连接;
加工处理后的文件数据存入缓存循环序列后,下位机USB数据截取装置每次从缓存循环序列的队尾取最新文件数据,在局域网内通过TCP/IP协议,利用以太网/局域网模块无线传输至每一个从机的上位机系统,用户通过人机交互界面模块进行数据查看原始数据;
对文件数据进行的加工处理包括数据分类以及数据去重,所述的数据分类是对数据格式进行分类,以分离不同类型数据,所述的数据去重的过程为:将文件数据划分为若干个大小相同的文件块;
对比相邻文件块的数据,查看相邻文件块中是否存在相同的数据段,若是,将后一个下标的文件块中重复的数据段去掉;否则,不予处理;
为每一个文件块添加头尾标记,将加工处理后的文件块中的文件数据存入缓存循环序列,等待被以太网/局域网模块向若干个从机无线传输;
上位机系统的缓存管理模块在处理接收回调的文件数据时,对文件数据进行二重验证以及去重处理,数据验证包括数据头部验证和尾部验证,在传输的文件数据头部和文件数据尾部添加标记,在接收到该文件数据时,判断文件数据头部标记与上位机系统正在接收的文件块的尾标记是否相匹配,如果匹配,则将该数据写入到文件中;否则,循环寻找下一个传输中的文件数据进行验证;
所述去重处理的过程为:
将文件数据划分为若干个大小相同的文件块;
对比相邻文件块的数据,查看相邻文件块中是否存在相同的数据段,若是,将后一个下标的文件块中重复的数据段去掉;否则,不予处理。
2.根据权利要求1所述的基于无线传输的USB数据截取处理系统,其特征在于,下位机USB数据截取装置的以太网/局域网模块为WiFi模块,微控制器通过AB地址总线及DB数据总线与USB接口端双向连接,微控制器与Wifi模块之间采用SPI协议,通过MOSI实现微控制器向Wifi模块的输出,通过MISO实现Wifi模块向微控制器的输出,微控制器通过DO实现微控制器向数据存储器的输出,通过DI实现数据存储器向微控制器的输出;微控制器通过DO实现微控制器向随机缓存器的输出,通过DI实现随机缓存器向微控制器的输出。
3.根据权利要求2所述的基于无线传输的USB数据截取处理系统,其特征在于,所述随机缓存器为随机存储器RAM,数据存储器为TF卡。
4.根据权利要求1所述的基于无线传输的USB数据截取处理系统,其特征在于,主机通过USB协议识别下位机USB数据截取装置,下位机USB数据截取装置向主机发送的请求通信指令为握手包,主机向下位机USB数据截取装置发送令牌包和文件数据包,文件数据包以缓存的形式存放于特定缓冲区,微控制器拷贝文件数据,在随机缓存器中构建缓存循环队列,然后对文件数据进行加工处理,将加工处理后的文件数据存入缓存循环序列。
5.根据权利要求4所述的基于无线传输的USB数据截取处理系统,其特征在于,若干个从机中的每一个从机上均设有上位机系统,所述上位机系统包括人机交互界面模块、TCP/IP模块、缓存管理模块及文件管理模块,所述人机交互界面模块具有可视化操作功能,设有系统登录界面、系统环境配置界面、数据监控界面,用户通过人机操作完成登录,然后通过人机操作完成系统环境配置,通过数据监控界面实现数据监控;所述TCP/IP模块包括IP/Port管理单元、设备连接单元和数据接收单元,用于TCP主从机配置、设备连接及接收回调文件数据;所述缓存管理模块用于处理接收回调的文件数据,包括接收数据缓存单元及文件数据本地缓存单元;所述文件管理模块包括文件读写单元及文件信息分析单元,以解析处理后的接收回调文件数据,并将其写入本地磁盘。
6.根据权利要求1 5任意一项所述的基于无线传输的USB数据截取处理系统,其特征在~
于,所述缓存循环队列采用多维缓存循环队列,根据传输文件数据的数量动态创建不同维数的缓存循环队列,每一维缓存循环队列存储一个传输中的文件数据,当所有的文件数据均传输完毕时,缓存循环队列维数变为1,并清空所有已使用的空间。
7.一种基于无线传输的USB数据截取处理方法,其特征在于,所述方法基于权利要求1所述的USB数据截取处理系统实现,所述方法包括以下步骤:S1.将每一个从机接入下位机USB数据截取装置的局域网中;
S2.将下位机USB数据截取装置通过USB接口端连接主机,向主机发送请求通信指令;
S3.主机识别下位机USB数据截取装置,并向下位机USB数据截取装置的数据存储器写入文件数据;S4.在文件数据写入数据存储器之前,微控制器拷贝文件数据,然后对文件数据加工处理,以缓存循环队列的方式写入随机缓存器中,并将原文件数据写入数据存储器;
S5.通过以太网/局域网模块将加工处理后的文件数据无线传输至若干个从机中,每一个从机接收到文件数据后,对数据进行二次处理,最后写入本地;
每一个从机上的上位机系统通过TCP/IP模块确认与下位机USB数据截取装置的连接;
加工处理后的文件数据存入缓存循环序列后,下位机USB数据截取装置每次从缓存循环序列的队尾取最新文件数据,在局域网内通过TCP/IP协议,利用以太网/局域网模块无线传输至每一个从机的上位机系统,用户通过人机交互界面模块进行数据查看原始数据;
对文件数据进行的加工处理包括数据分类以及数据去重,所述的数据分类是对数据格式进行分类,以分离不同类型数据,所述的数据去重的过程为:将文件数据划分为若干个大小相同的文件块;
对比相邻文件块的数据,查看相邻文件块中是否存在相同的数据段,若是,将后一个下标的文件块中重复的数据段去掉;否则,不予处理;
为每一个文件块添加头尾标记,将加工处理后的文件块中的文件数据存入缓存循环序列,等待被以太网/局域网模块向若干个从机无线传输;
上位机系统的缓存管理模块在处理接收回调的文件数据时,对文件数据进行二重验证以及去重处理,所述的数据验证包括数据头部验证和尾部验证,在传输的文件数据头部和文件数据尾部添加标记,在接收到该文件数据时,判断文件数据头部标记与上位机系统正在接收的文件块的尾标记是否相匹配,如果匹配,则将该数据写入到文件中;否则,循环寻找下一个传输中的文件数据进行验证;
所述去重处理的过程为:
将文件数据划分为若干个大小相同的文件块;
对比相邻文件块的数据,查看相邻文件块中是否存在相同的数据段,若是,将后一个下标的文件块中重复的数据段去掉;否则,不予处理。
8.根据权利要求7所述的基于无线传输的USB数据截取处理方法,其特征在于,步骤S1中,根据USB数据截取装置的局域网预设的密钥,每一个从机接入下位机USB数据截取装置的局域网中;
主机通过USB协议识别下位机USB数据截取装置,下位机USB数据截取装置向主机发送的请求通信指令为握手包,主机向下位机USB数据截取装置发送令牌包和文件数据包,文件数据包中包括向下位机USB数据截取装置的数据存储器写入的文件数据;
步骤S4中,对文件数据进行的加工处理包括数据分类及数据去重,所述的数据分类是对数据格式进行分类,以分离不同类型数据;
每一个从机接收到文件数据后,对数据进行的二次处理包括:对数据进行二重验证以及去重处理。