bash – 并行检查md5文件

发布时间：2020-12-15 21:24:11 所属栏目：安全来源：网络整理

导读：我有一个包含许多行的md5sum文件.我想使用GNU parallel来加速md5sum检查过程.在md5sum中,当没有文件输入时,它将从stdin获取md5字符串.我试过这个： cat checksums.md5 |并行md5sum -c {} 但是得到这个错误： md5sum 445350b414a8031d9dd6b1e68a6f2367 testin

我有一个包含许多行的md5sum文件.我想使用GNU parallel来加速md5sum检查过程.在md5sum中,当没有文件输入时,它将从stdin获取md5字符串.我试过这个：

cat checksums.md5 |并行md5sum -c {}

但是得到这个错误：

md5sum 445350b414a8031d9dd6b1e68a6f2367 testing.gz：没有这样的文件或目录

如何并行md5sum检查？

解决方法

假设checksums.md5的格式为：

d41d8cd98f00b204e9800998ecf8427e  My file name

跑：

cat checksums.md5 | parallel --pipe -N1 md5sum -c

如果您的文件很小：-N100

如果这不能加快您的处理速度,请确保您的磁盘足够快：md5sum可以处理500 MB / s. iostat -dkx 1可以告诉您磁盘是否是瓶颈.

（编辑：李大同）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!