1.一种基于区块链及云计算的数据共享系统,其特征在于,包括:
用户终端模块,包括多个数据共享用户终端,用于发起数据上传请求或数据下载请求;
云计算模块,与用户终端模块连接,包括多个任务调度节点、数据处理节点和数据存储节点;
所述任务调度节点与用户终端模块中的数据共享用户终端连接,用于基于数据上传请求或数据下载请求,在多个数据处理节点中确定上传数据处理节点或下载数据处理节点;
所述数据处理节点分别与任务调度节点和数据存储节点连接,其中上传数据处理节点用于对目标共享数据进行数据切分,并根据每个数据存储节点的剩余存储空间,基于均衡原则将切分后的目标共享数据并行传输至多个数据存储节点中的至少两个进行存储,并生成目标共享数据的存储路径及存储路径的哈希值,进行哈希值碰撞检测;当哈希值碰撞检测通过时,将目标共享数据的存储路径上传至区块链保存;
上传数据处理节点进行哈希值碰撞检测,包括:
获取用于存储目标共享数据的所有数据存储节点,作为目标数据存储节点;计算所有的任意两个目标数据存储节点之间的任务协同参数,取平均值后得到目标共享数据的任务协同参数均值;
所述任意两个目标数据存储节点之间的任务协同参数的计算方法为:若一条已上传共享数据的至少一部分使用这两个目标数据存储节点进行存储,则将该已上传共享数据记为目标已上传共享数据;将将目标已上传共享数据的总数与已上传共享数据的总数之间的比值作为这两个数据存储节点之间的任务协同参数;
基于任意两个目标数据存储节点之间的任务协同参数和目标共享数据的任务协同参数均值,计算目标共享数据的任务协同参数波动参数;
基于目标共享数据的任务协同参数均值和目标共享数据的任务协同参数波动参数,计算目标共享数据的碰撞风险参数;
当目标共享数据的碰撞风险参数小于预设碰撞风险参数阈值时,采用第一碰撞检测方式进行哈希值碰撞检测;
当目标共享数据的碰撞风险参数大于或等于预设碰撞风险参数阈值时,采用第二碰撞检测方式进行哈希值碰撞检测;
若目标共享数据的哈希值碰撞检测不通过,则生成目标共享数据的防碰撞哈希值,对目标共享数据的存储路径的哈希值进行更新,并再次进行哈希值碰撞检测,直到目标共享数据通过哈希值碰撞检测;
所述下载数据处理节点用于基于目标共享数据的哈希值,从区块链获取目标共享数据的存储路径,进而根据目标共享数据的存储路径,并行从多个数据存储节点读取目标共享数据;
区块链,与云计算模块中的任务处理节点连接,用于存储共享数据的存储路径。
2.根据权利要求1所述的一种基于区块链及云计算的数据共享系统,其特征在于,任务调度节点基于数据上传请求或数据下载请求,在多个数据处理节点中确定上传数据处理节点或下载数据处理节点,包括:任务调度节点获取每个数据处理节点在多个时间点的运行参数信息和任务调度信息,基于每个数据处理节点在多个时间点的运行参数信息和任务调度信息,确定数据处理节点的运行异常参数;
基于每个数据处理节点的运行异常参数,根据负载均衡原则从多个数据处理节点中确定目标数据处理节点。
3.根据权利要求2所述的一种基于区块链及云计算的数据共享系统,其特征在于,数据处理节点的运行参数信息包括CPU的使用率、已用内存占总内存的比例、发送的数据包数量、接收的数据包数量、发送的数据字节数、接收的数据字节数;数据处理节点的任务调度信息包括分配的数据上传请求的数量、每个数据上传请求对应的数据量、分配的数据下载请求的数量、每个数据下载请求对应的数据量。
4.根据权利要求2所述的一种基于区块链及云计算的数据共享系统,其特征在于,任务调度节点基于每个数据处理节点在多个时间点的运行参数信息和任务调度信息,通过异常确认模型确定数据处理节点的运行异常参数,所述异常确认模型包括长短期记忆网络模型。
5.根据权利要求1所述的一种基于区块链及云计算的数据共享系统,其特征在于,上传数据处理节点对目标共享数据进行数据切分,包括:上传数据处理节点获取目标共享数据所在数据共享用户终端已上传共享数据的历史下载次数;
基于目标共享数据所在数据共享用户终端已上传共享数据的历史下载次数及该数据共享用户终端的下载次数均值,计算该数据共享用户终端的下载次数波动参数;
基于目标共享数据所在数据共享用户终端的下载次数波动参数,确定目标共享数据的数据切分大小;
根据目标共享数据的数据切分大小,对目标共享数据进行数据切分。
6.根据权利要求1所述的一种基于区块链及云计算的数据共享系统,其特征在于,所述基于任意两个目标数据存储节点之间的任务协同参数和目标共享数据的任务协同参数均值,计算目标共享数据的任务协同参数波动参数,公式为:;
其中,为目标共享数据的任务协同参数波动参数,为第个目标数据存储节点与第h个目标数据存储节点之间的任务协同参数,为目标共享数据的任务协同参数均值,为目标数据存储节点的总数;
所述基于目标共享数据的任务协同参数均值和目标共享数据的任务协同参数波动参数,计算目标共享数据的碰撞风险参数,公式为:;
其中,为目标共享数据的碰撞风险参数,和均为权重参数,为预设任务协同参数均值,为预设任务协同参数波动参数,为预设碰撞风险参数。
7.根据权利要求1所述的一种基于区块链及云计算的数据共享系统,其特征在于,所述采用第一碰撞检测方式进行哈希值碰撞检测,包括:对每个已上传共享数据的存储路径的哈希值在多个随机位置进行抽样,生成已上传共享数据的抽样哈希值;
对目标共享数据的存储路径的哈希值在同样位置进行抽样,生成目标共享数据的抽样哈希值;
若位于相同位置的目标共享数据的抽样哈希值与任一已上传共享数据的抽样哈希值相同,则判定存在哈希碰撞,目标共享数据不通过哈希值碰撞检测。
8.根据权利要求1所述的一种基于区块链及云计算的数据共享系统,其特征在于,所述采用第二碰撞检测方式进行哈希值碰撞检测,包括:采用K均值聚类算法对所有已上传共享数据的存储路径的哈希值进行聚类,确定多个存储路径聚类簇;
计算目标共享数据的存储路径的哈希值与每个存储路径聚类簇的聚类中心之间的哈希值相似度,将哈希值相似度最大的存储路径聚类簇作为目标存储路径聚类簇;
若目标存储路径聚类簇中存在一个已上传共享数据的存储路径的哈希值与目标共享数据的存储路径的哈希值一致,则判定存在哈希碰撞,目标共享数据不通过哈希值碰撞检测。
9.根据权利要求1所述的一种基于区块链及云计算的数据共享系统,其特征在于,生成目标共享数据的防碰撞哈希值的方法包括:抽取目标共享数据的存储路径的哈希值中的随机片段作为防碰撞哈希值。