2.7 校验和与核实

校验和(checksum)程序用来从文件中生成校验和密钥,然后利用这个校验和密钥核实文件的完整性。一份文件可以通过网络或任何存储介质分发到不同的地点。出于多种原因,数据有可能在传输过程中丢失了若干位,从而导致文件损坏。这种错误通常发生在从Internet上下载文件时,或者通过网络传输文件时,或者遭遇CD光盘损坏等。

因此,我们需要采用一些测试方法来确定接收到的文件是否存在错误。用于文件完整性测试的特定密钥就被称为校验和。

我们对原始文件和接收到的文件都进行校验和计算。通过比对两者的校验和,就能够核实接收到的文件是否正确。如果校验和(一个来自源位置的原始文件,另一个来自目的地的接收文件)相等,就意味着我们接收到了正确的文件,否则用户就不得不重新发送文件并再次比对校验和。

校验和对于编写备份脚本或系统维护脚本来说非常重要,因为它们都会涉及通过网络传输文件。通过使用校验和核实,我们就可以识别出那些在网络传输过程中出现损坏的文件,并重发这些文件,从而确保数据的完整性。

2.7.1 预备知识

最知名且使用最为广泛的校验和技术是md5sumsha1sum。它们对文件内容使用相应的算法来生成校验和。下面就来看看如何从文件中生成校验和并核实文件的完整性。

2.7.2 实战演练

为了计算md5sum,使用下列命令:

  1. $ md5sum filename
  2. 68b329da9893e34099c7d8ad5cb9c940 filename

如上所示,md5sum是一个32个字符的十六进制串。

将输出的校验和重定向到一个文件,然后用这个MD5文件核实数据的完整性:

  1. $ md5sum filename > file_sum.md5

2.7.3 工作原理

md5sum校验和计算的方法如下:

  1. $ md5sum file1 file2 file3 ..

当使用多个文件时,输出中会在每行中包含单个文件的校验和:

  1. [checksum1] file1
  2. [checksum1] file2
  3. [checksum1] file3

可以按照下面的方法用生成的文件核实数据完整性:

  1. $ md5sum -c file_sum.md5
  2. # 这个命令会输出校验和是否匹配的消息

如果需要用所有的.md5信息来检查所有的文件,可以使用:

  1. $ md5sum *.md5

与md5sum类似,SHA1是另一种常用的校验和算法。它从给定的输入文件中生成一个长度为40个字符的十六进制串。用来计算SAH1串的命令是sha1sum。其用法和md5sum的非常相似。只需要把先前讲过的那些命令中的md5sum替换成sha1sum就行了,另外,记住要将输入文件名从file_sum.md5改为file_sum.sha1。

校验和对于核实下载文件的完整性非常有帮助。我们从Internet上下载的ISO镜像文件一般更容易出现错误。因而,为了检查接收文件正确与否,校验和得以广泛应用。校验和程序对同样的文件数据始终生成一模一样的校验和。

2.7.4 补充内容

对于多个文件,校验和同样可以发挥作用。现在就看看如何校验并核实多个文件。

对目录进行校验

校验和是从文件中计算得来的。对目录计算校验和意味着我们需要对目录中的所有文件以递归的方式进行计算。

它可以用命令md5deepsha1deep来实现。首先,需要安装md5deep软件包以确保能找到这些命令。该命令的用法如下:

  1. $ md5deep -rl directory_path > directory.md5
  2. # -r 使用递归的方式
  3. # -l 使用相对路径。默认情况下,md5deep会输出文件的绝对路径

或者,也可以结合find来递归计算校验和:

  1. $ find directory_path -type f -print0 | xargs -0 md5sum >> directory.md5

用下面的命令进行核实:

  1. $ md5sum -c directory.md5