2023年12月7日发(作者:)

[shell]Linux之md5命令

背景

在网络传输、设备之间转存、复制大文件等时,可能会出现传输前后数据不一致的情况。这种情况在网络这种相对更不稳定的环境中,容易

出现。那么校验文件的完整性,也是势在必行的。md5sum命令用于生成和校验文件的md5值。它会逐位对文件的内容进行校验。是文件的

内容,与文件名无关,也就是文件内容相同,其md5值相同。md5值是一个128位的二进制数据,转换成16进制则是32(128/4)位的进制

值。md5校验,有很小的概率不同的文件生成的md5可能相同。比md5更安全的校验算法还有SHA*系列的。在网络传输时,我们校验源文

件获得其md5sum,传输完毕后,校验其目标文件,并对比如果源文件和目标文件md5 一致的话,则表示文件传输无异常。否则说明文件在

传输过程中未正确传输。

选项

-b 以二进制模式读入文件内容

-t 以文本模式读入文件内容

-c 根据已生成的md5值,对现存文件进行校验

--status 校验完成后,不生成错误或正确的提示信息,可以通过命令的返回值来判断。

使用举例

生成文件md5值

md5sum file

[root@master lianxi]# md5sum data

0a6de444981b68d6ae49 data

[root@master lianxi]# md5sum *

0a6de444981b68d6ae49 data

13df384c47dd2638fd923f60c40224c6 data2

md5sum校验的是文件内容,与文件名无关

以文本模式或二进制模式读入文件并对其进行校验

---选项---

-b

-t

以二进制模式读入内容

以文本模式读入文件内容进行校验

---释义---

虽然是不同的读入模式,但是在进行求md5的时候,是一样的,因为是逐位校验的。

如下文本文件,无论通过哪种模式读取md5都一致。

[root@master lianxi]# file data

data: ASCII text

[root@master lianxi]# md5sum data

0a6de444981b68d6ae49 data

[root@master lianxi]# md5sum -b data

0a6de444981b68d6ae49 *data

[root@master lianxi]# md5sum -t data

0a6de444981b68d6ae49 data

md5值重定向

将生成md5值重定向到指定的文件,通常文件的扩展名我们会命为.md5

[root@master lianxi]# md5sum data > 5

[root@master lianxi]# md5sum data

0a6de444981b68d6ae49 data

[root@master lianxi]# cat 5

0a6de444981b68d6ae49 data

将多个文件的md5重定向到指定的文件,每个文件的md5生成为一行

[root@master lianxi]# ls

data 5 5

[root@master lianxi]# md5sum data* > 5

[root@master lianxi]# cat 5

0a6de444981b68d6ae49 data

0a6de444981b68d6ae49

0bd94658869c53cdcdf35a0f7de93e01 5重定向追加

这里新增文件ls,单独求其md5,将其md5追加到文件中

[root@master lianxi]# cp /bin/ls .

[root@master lianxi]# ls

data 5 5 ls

[root@master lianxi]# md5sum ls >> 5

[root@master lianxi]# cat 5

0a6de444981b68d6ae49 data

0a6de444981b68d6ae49

0bd94658869c53cdcdf35a0f7de93e01 5

c6337b20f3c159544bff5cf622391f9e ls

md5校验

-c 选项来对文件md5进行校验。校验时,根据已生成的md5来进行校验。生成当前文件的md5,并和之前已经生成的md5进行对比,如果一

致,则返回OK,否则返回错误信息

md5sum –c 5

[root@master lianxi]# md5sum -c 5

data: OK

: OK

5: OK

ls: OK

修改文件后,文件md5变化

[root@master lianxi]# ls

data

[root@master lianxi]# md5sum data

2360752c3368ca4f89169f5ecc06e383 data

[root@master lianxi]# md5sum data > 5

[root@master lianxi]# echo "lwg" >> data

[root@master lianxi]# md5sum data

287d237083a42f09785daa46a5fa3afe data

[root@master lianxi]# md5sum -c 5

data: FAILED

md5sum: WARNING: 1 of 1 computed checksum did NOT match

--status,不显示校验信息,以命令返回值来判断,校验一致返回0,不一致返回1

[root@master lianxi]# md5sum -c 5

data: FAILED

md5sum: WARNING: 1 of 1 computed checksum did NOT match

[root@master lianxi]# md5sum -c --status 5

[root@master lianxi]# echo $?

1

多个文件文件校验和grep连用,通过grep将正确的信息过滤掉

[root@master lianxi]# md5sum -c ../5

acpid: OK

acpid.1: OK

: OK

: OK

: OK

: OK

.1: OK

...

...

省略中间部分

...

...

.2: OK 15: md5sum: WARNING: 1 of 56 computed checksums did NOT match

[root@master lianxi]# md5sum -c ../5 | grep -v OK

md5sum: WARNING: 1 of 56 computed checksums did NOT match

cron.1: FAILED

特殊说明

1. md5sum 是校验文件内容,与文件名是否相同无关

2. md5sum值逐位校验,所以文件越大,校验时间越长。

总结

通过md5sum来校验生成文件校验码,来发现文件传输(网络传输、复制、本地不同设备间的传输)异常造成的文件内容不一致的情况。工作 实践应用场景:

需要比较2个 包和两个包,变更是不是和开发说的一致

1. 获取包,确保包正确无误

获取包后,验证包的MD5值:md5sum rc*.

2. 解压缩到指定目录

确保对应的目录存在

tar -zxvf -C ./test_rc1

tar -zxvf -C ./test_rc2

3. 递归生成各文件的的MD5值

find ./test_rc1 -type f -print0| xargs -0 md5sum >> rc1_

find ./test_rc2 -type f -print0| xargs -0 md5sum >> rc2_

4. 比较两文件的MD5值

diff -c rc1_ rc2_

或者用UltraCompare Professional比对结果