要处理2个10G的文件进行内容比较,内存又不够大。
借助md5算法,对文件里的每条记录进行md5处理,然后再装入内存,大大减少存储空间的占用,解决问题。
感恩少龙的建议。
一条信息,如果已经进行md5处理,那么比对的时候,也要同样使用md5的方式,才能正确比对。否则就不能正确的解读信息。而原本就没有md5处理,那么接收的时候,就不能再进行md5处理,否则就不能正确解读。用在生活中的沟通,也是同样的道理。由于基于每个人自己生活的习惯和对人的理解,对同样信息的不同解读,结果就大不相同。
MD5信息摘要算法 (英语:MD5 Message-Digest Algorithm),一种被广泛使用的 密码散列函数 ,可以产生出一个128位(16 字节 )的散列值(hash value),用于确保信息传输完整一致。
MD5校验工具,其实就是一个MD5加密计算的软件。软件可以计算得到文件的MD5值,再跟官方给出的MD5值进行对比没有差别就说明软件没有经过修改了。
MD5简单来说是可以说是文件的“数字指纹”,常用于文件的加密和解密。任何一个文件都有且只有一个独一无二的MD5信息值,并且如果这个文件被修改过,它的MD5值也将随之改变。
因此,我们可以通过对比同一文件的MD5值,来校验这个文件是否被“篡改”过。这就需要使用md5校验工具了。
扩展资料
MD5算法原理:
对MD5算法简要的叙述可以为:MD5以512位分组来处理输入的信息,且每一分组又被划分为16个32位子分组,经过了一系列的处理后,算法的输出由四个32位分组组成,将这四个32位分组级联后将生成一个128位散列值。
MD5校验应用原理举例:
例如客户往我们数据中心同步一个文件,该文件使用MD5校验,那么客户在发送文件的同时会再发一个存有校验码的文件,我们拿到该文件后做MD5运算,得到的计算结果与客户发送的校验码相比较,如果一致则认为客户发送的文件没有出错,否则认为文件出错需要重新发送。
参考资料:百度百科-MD5校验
使用MD5验证工具的方法:
1、运行MD5校验工具,点击”浏览”选项,可以浏览添加需要校验的软件,镜像或视频文件等;
2、打开搜索一个镜像,下载该软件的文件系统信息MD5值;
3、点击浏览进行添加文件;
4、添加后,md5校验会自动开始计算,校验好了之后,会出现当前下载的MD5和sha1值,对比一下之前的那个备份的,若相同表示文件没有被修改过,若不同,则建议不要使用。
MD5是message-digestalgorithm5(信息-摘要算法)的缩写,被广泛用于加密和解密技术上,可以说是文件的“数字指纹”。任何一个文件,无论是可执行程序、图像文件、临时文件或者其他任何类型的文件,也不管它体积多大,都有且只有一个独一无二的MD5信息值,并且如果这个文件被修改过,其MD5值也将随之改变。因此,可以通过对比同一文件的MD5值,来校验这个文件是否被“篡改”过。
欢迎分享,转载请注明来源:内存溢出
评论列表(0条)