1.一种计算机大数据安全传输系统,其特征在于,包括:检测模块、分析模块、服务器、计算机终端和数据库;所述检测模块安装在服务器和计算机终端上,用于检测服务器和计算机终端的运行状态,其输出端与所述分析模块的输入端相连接;所述分析模块的输出端与所述计算机终端输入端相相连接,用于确定数据传输时间与服务器处理数据所需时间之和最小的数据分片数量;所述计算机终端和服务器相互连接,用于将数据加密后发送到所述服务器,并且通过单向散列算法计算数据的散列值,加密后发送到所述服务器;所述服务器对数据散列值密文和数据密文进行解密,对数据明文采用单向散列算法计算数据的散列值,与解密出的数据散列值明文比较来判断数据的完整性;数据库用于存储历史数据的传输时间、处理时间、服务器状态特征和计算机终端状态特征信息。
2.根据权利要求1所述的一种计算机大数据安全传输系统,其特征在于,所述计算机终端和服务器持有对应的签名公钥和私钥,计算机终端和服务器通过协商生成会话密钥;计算机终端使用单向散列算法对会话密钥进行计算,得到会话密钥的散列值,使用计算机终端持有的签名私钥对会话密钥的散列值进行加密,通过给服务器发送会话密钥散列值密文同时进行数字签名和会话密钥的确认。
3.根据权利要求1所述的一种计算机大数据安全传输系统,其特征在于,所述计算机终端将数据分成两部分,一部分为独立数据,另一部分为额外数据;计算机终端将所述独立数据发送到服务器后,服务器就可以对独立数据进行处理,所述额外数据则必须依赖独立数据方能进行处理。
4.根据权利要求1所述的一种计算机大数据安全传输系统,其特征在于,数据分片方式采用基于键的分片,对数据的一个特征进行哈希运算得到特征的哈希值作为唯一标识,根据唯一标识确定数据所属的分片。
5.一种计算机大数据安全传输方法,其特征在于,包括以下步骤:S5‑1,分析模块确定分片数量,计算机终端对数据进行分片;
S5‑2,计算机终端对分片后的数据使用会话密钥进行加密得到数据片密文;
S5‑3,计算机终端传输数据片密文给服务器,服务器对数据片密文进行解密得到数据片明文;服务器对数据片明文进行单向散列运算得到数据片明文散列值,根据散列值判断数据片的完整性,若不完整,则服务器向计算机终端发出重新发送的请求;当服务器接收到的数据片数量达到k1片,包含全部独立数据时,服务器同时进行k1个数据片处理和接收剩余k2个数据片的操作;
S5‑4;服务器接收剩余的k2个数据片并完成整个数据的处理。
6.根据权利要求5所述的一种计算机大数据安全传输方法,其特征在于,所述对数据进行分片包括以下步骤:S6‑1,将服务器、计算机终端状态和数据特征作为输入,数据传输所需时间作为输出,建立数据传输所需时间的回归模型;
S6‑2,将服务器状态特征和数据特征作为输入,数据处理所需时间作为输出,建立数据处理所需时间所需时间的回归模型;
S6‑3,预估完成数据传输和数据处理所需要的时间T=T1+T2+ΔT3+T4;T1为传输前k1个数据片所需要的时间,T2为服务器处理上述k1个数据片所需要的时间,ΔT3为传输剩余k2个数据片所需时间T3与T2的差值,若T3
S6‑4,选择完成数据传输和数据处理所需要的时间T最少的分片数量s。
7.根据权利要求6所述的一种计算机大数据安全传输方法,其特征在于,计算所述T1和T3包括以下步骤:S7‑1,基于数据片大小和传输时间,判断每个数据片出现问题的概率Pi;
S7‑2,判断每个数据片需要传输的次数zi及对应的概率:
P{zi=1}=1‑Pi;
1
P{zi=2}=Pi(1‑Pi);
…;
s‑1
P{zi=s}=Pi (1‑Pi);
S7‑3,计算每个数据片需要传输的时间
S7‑4,确定传输k1个数据片所需要的时间 当
时,停止进行计算,将 置为零;e为1和s之
间的正整数,h为时间阈值,根据具体情况对h进行设置;
S7‑5,对剩余k2个数据片重复步骤S7‑4进行计算得到T3。
8.根据权利要求7所述一种计算机大数据安全传输方法,其特征在于,判断每个数据片出现问题的概率Pi=P{A|a=mi,b=ti}通过以下方式计算:S8‑1,获取数据的大小和传输时间信息;
S8‑2,根据数据片大小和传输时间信息,判断是否存在大小和传输时间信息相同的历史数据,若存在,则进入S8‑3,否则进入S8‑4;
S8‑3, 结束;
S8‑4,使用DBSCAN算法对数据片和历史数据进行聚类,确定数据片所属的簇;
S8‑5,在数据片所属的簇中随机选择q个数据,q个数据与数据片的欧氏距离分别为R1,R2,...,Rq,分别判断其出现问题的概率 其中j=1,2,...,q;
S8‑6, 结束;
其中,mi为第i个数据片的大小,ti为第i个数据片传输所需时间,a为数据大小随机变量变量,b为数据据传输所需时间随机变量,A为数据出现问题这一随机事件。
9.根据权利要求8所述的一种计算机大数据安全传输方法,其特征在于,在步骤S8‑5中,所述在数据片所属的簇中随机选择q个数据包括以下步骤:S9‑1,以数据片为圆心,构筑一个全部位于数据片所属簇中的半径最大的圆,该圆的半径为rmax;
S9‑2,按照距离数据片的距离,将圆分成面积相同的一个以数据片为圆心的圆和w个以数据片为圆心的圆环,其半径分别为r1、r2、...、rw、rmax,基于所述半径将区间[0,rmax]分成w+1个部分;
S9‑3,在区间[0,rmax]生成1个随机数,根据随机数所处的区间,从对应的圆或者圆环里随机选择一个数据点;
S9‑4,重复步骤S9‑3直到获取q个数据点。
10.根据权利要求5所述的一种计算机大数据安全传输方法,其特征在于,会话密钥生成包括以下步骤:S10‑1,服务器生成4次随机数,从函数库中选择对应的4个函数,对应的自变量分别为z1、z2、z3、z4;使用签名公钥加密后发送给计算机终端,所述函数库包括但不限于幂函数、指数函数、对数函数、三角函数、反三角函数和复合函数;
S10‑2,计算机终端选择最大的区间[f,g],区间[f,g]满足所有4个函数均单调的条件,若区间[f,g]不存在,则重复步骤S10‑1;
S10‑3,计算机终端在区间[f,g]上随机选择4个开区间,作为函数的定义域,每个函数的值域,至少有一个值域区间为自身独有的,未被其余函数的值域覆盖,若不满足条件则重复步骤S10‑3;
S10‑4,计算机终端在每个函数独有的值域对应的定义域上,分别随机选择一个数作为自变量的取值,并且获取4个自变量取值α,β,x和y对应的4个函数值,α,β,x和y均需满足有效数字位数大于6的条件,否则重新随机选择4个自变量取值,将4个函数值通过签名公钥进行非对称加密后发送给服务器;
S10‑5,服务器使用自身的第二签名私钥对4个函数值密文进行解密,并根据4个函数值确定出4个自变量的取值α,β,x和y;
S10‑6,计算机终端随机生成2个正整数p和n,通过签名公钥非对称加密后发送给计算机终端;
S10‑7,服务器和计算机终端根据6个参数α,β,x,y,p和n确定椭圆曲线和基点,其中,α,β和p确定一个椭圆曲线,p为素数域内点的个数,α和β为椭圆曲线参数,(x,y)为基点坐标,n为基点的阶;
S10‑8,服务器和计算机终端基于生成的椭圆曲线,采用ECDHE密钥协商算法生成会话密钥;
S10‑9,会话密钥首次生成之后,步骤S10‑1、S10‑4和S10‑6不再使用签名公钥进行非对称加密,而是采用上一次生成的会话密钥进行对称加密。