首页 > 代码库 > 自动校验文件夹及其内容shell程序(md5 校验文件夹中所有数据)
自动校验文件夹及其内容shell程序(md5 校验文件夹中所有数据)
一.问题的来源
有时候copy一些重要的数据,得到之后需要与原数据进行核对是否数据一致。这就需要进行校验。
二.问题的分析
校验数据有多种方法,最简单的是使用文件的md5码进行校验。但是文件很多,手动的每个文件进行md5校验显然不合适,这就需要编写shell程序解决。
三.问题的解决
通过shell程序解决文件校验问题
1.通过命令得到文件md5值
比如得到的数据文件夹为 data 文件夹
则在data 文件夹中输入以下命令
find ./ -type f -print | xargs md5sum > /tmp/md5.1 cd /tmp cat md5.1 | sort > md5.1.1 rm md5.1 mv md5.1.1 md5.1
2.在原数据文件夹中 data 文件夹中输入以下命令
find ./ -type f -print | xargs md5sum > /tmp/md5.2 cd /tmp cat md5.2 | sort > md5.2.1 rm md5.2 mv md5.2.1 md5.2
3.把上面得到的md5.1 和md5.2放到同一个服务器同一个目录下,比如从server_1 scp 到server_2下
scp server_1:/tmp/md5.1 /tmp/
4.执行 diff 如果输出为空,则说明数据一直,否则,说明数据不一致
diff /tmp/md5.1 /tmp/md5.2
四.总体思路
通过得到原文件夹下和新文件夹下的所有文件的md5值,然后把md5值进行排序,最后比较两md5值是否相同即可
五.注意
实际上 上述操作中的md5.1 (或md5.2) 中的内容是 "文件名 md5值" 的格式。
六.全自动shell程序
比如 有两台机器 server_1 和server_2 ,刚从server_1 上的 /home/longxibendi/ 下scp 的 data文件夹到 server_2 的 /home/longxibendi/ 下
程序如下:
#!/bin/bash#author longxibendi#function check file1 and file2 use their md5 #support folder cd /home/longxibendi/data find ./ -type f -print | xargs md5sum > /tmp/md5.1 cd /tmp cat md5.1 | sort > md5.1.1 rm md5.1 mv md5.1.1 md5.1 ssh longxibendi@server_2 cd /home/longxibendi/data find ./ -type f -print | xargs md5sum > /tmp/md5.2 cd /tmp cat md5.2 | sort > md5.2.1 rm md5.2 mv md5.2.1 md5.2 scp server_1:/tmp/md5.1 /tmp/md5.2 # if file1 and file2 is same ,then print It is OK # else if file1 and file2 is different ,then print They are different if [ -z "`diff md5.1 md5.2`" ] ;then echo "It is OK"; else echo "They are different"; fi
本文出自 “11726068” 博客,谢绝转载!
自动校验文件夹及其内容shell程序(md5 校验文件夹中所有数据)
声明:以上内容来自用户投稿及互联网公开渠道收集整理发布,本网站不拥有所有权,未作人工编辑处理,也不承担相关法律责任,若内容有误或涉及侵权可进行投诉: 投诉/举报 工作人员会在5个工作日内联系你,一经查实,本站将立刻删除涉嫌侵权内容。