如何快速检测大数据的完整性?

vps网友提供 03-11 讨论归档 2
貌似传统的方法如下:
ORIGIN AUDIT
row1 hash(row1)
row2 hash(row2+hash(row1))
···
rowN hash(rowN+hash(···))


其中ORIGIN table里的是原始数据,AUDIT table里的是校验数据,假设AUDIT table里的数据没有被篡改过,那么最原始的办法就是一条一条用hash值去比对,

但是对于大数据这样的效率太低了,有没有什么办法可以快速的校验数据的完整性呀

本文由 vps网友提供,转载请注明出处

本文链接: https://www.vpsvsvps.com/discuss/a/1676471647256711168.html

标签:
Admstor
03-11

已存档的数据直接hash文件即可
在线的数据感觉基本上就只能一条条扫了

binux
03-11

确定你的需求,如果要检测任意一位错误,除了全扫一遍别无他法。