文件sha1值 python python sha-1

首先介绍一下MD5和SHA1

 

MD5

MD5的全称是Message-Digest Algorithm 5（信息-摘要算法）。128位长度。目前MD5是一种不可逆算法。

具有很高的安全性。它对应任何字符串都可以加密成一段唯一的固定长度的代码。

 

SHA1

SHA1的全称是Secure Hash Algorithm(安全哈希算法) 。SHA1基于MD5，加密后的数据长度更长，

它对长度小于264的输入，产生长度为160bit的散列值。比MD5多32位。

因此，比MD5更加安全，但SHA1的运算速度就比MD5要慢了。

 

Python 中的用法：

Python 内置的 hashlib 模块就包括了 md5 和 sha1 算法。而且使用起来也极为方便

 

Example of MD5:

1 import hashlib
2 
3 data =  'This a md5 test!'
4 hash_md5 = hashlib.md5(data)
5 
6 hash_md5.hexdigest()

会输出：

1 '0a2c0b988863f08471067903d8737962'

上面这段字符串就是 data 转换后的MD5值。

 

MD5不仅仅是上面这个例子这样用来处理字符串，还有更广泛的用途：

• 加密网站注册用户的密码。 （但去年的各大网站密码泄漏事件确实让人蛋疼……）
• 网站用户上传图片 / 文件后，计算出MD5值作为文件名。（MD5可以保证唯一性）
• key-value数据库中使用MD5值作为key。
• 比较两个文件是否相同。（大家在下载一些资源的时候，就会发现网站提供了MD5值，就是用来检测文件是否被篡改）
• ……

 

sha1的使用与MD5类似，就像下面这样，所以不再讲解SHA1：

import hashlib

hashlib.sha1('This is a sha1 test!').hexdigest()

 

 

 

处理大文件：

上面说过可以用MD5来检测两个文件是否相同，但想想，如果是两个很大的文件，担心内存不够用，这时怎么办？

这就要使用 update 方法了。代码如下：

import hashlib

def get_file_md5(f):
    m = hashlib.md5()

    while True:
        data = f.read(10240)
        if not data:
            break

        m.update(data)
    return m.hexdigest()


with open(YOUR_FILE, 'r') as f:
    file_md5 = get_file_md5(f)

(windows 用户 要使用 'rb'方式打开文件)

 

大家可以用下面这段代码验证一下：

import hashlib

x = hashlib.md5()
x.update('hello, ')
x.update('python')
x.hexdigest()

hashlib.md5('hello, python').hexdigest()

 

这两次的输出是一样的。
SHA1 也是一样的用法。