首先介绍一下MD5和SHA1

 

MD5

MD5的全称是Message-Digest Algorithm 5(信息-摘要算法)。128位长度。目前MD5是一种不可逆算法。

具有很高的安全性。它对应任何字符串都可以加密成一段唯一的固定长度的代码。

 

SHA1

SHA1的全称是Secure Hash Algorithm(安全哈希算法) 。SHA1基于MD5,加密后的数据长度更长,

它对长度小于264的输入,产生长度为160bit的散列值。比MD5多32位。

因此,比MD5更加安全,但SHA1的运算速度就比MD5要慢了。

 

Python 中的用法:

Python 内置的 hashlib 模块就包括了 md5 和 sha1 算法。而且使用起来也极为方便

 

Example of MD5:

1 import hashlib
2 
3 data =  'This a md5 test!'
4 hash_md5 = hashlib.md5(data)
5 
6 hash_md5.hexdigest()

会输出:

1 '0a2c0b988863f08471067903d8737962'

上面这段字符串就是 data 转换后的MD5值。

 

MD5不仅仅是上面这个例子这样用来处理字符串,还有更广泛的用途:

  • 加密网站注册用户的密码。 (但去年的各大网站密码泄漏事件确实让人蛋疼……)
  • 网站用户上传图片 / 文件后,计算出MD5值作为文件名。(MD5可以保证唯一性)
  • key-value数据库中使用MD5值作为key。
  • 比较两个文件是否相同。(大家在下载一些资源的时候,就会发现网站提供了MD5值,就是用来检测文件是否被篡改)
  • ……

 

sha1的使用与MD5类似,就像下面这样,所以不再讲解SHA1:

import hashlib

hashlib.sha1('This is a sha1 test!').hexdigest()

 

 

 

处理大文件:

上面说过可以用MD5来检测两个文件是否相同,但想想,如果是两个很大的文件,担心内存不够用,这时怎么办?

这就要使用 update 方法了。代码如下:

文件sha1值 python python sha-1_python

import hashlib

def get_file_md5(f):
    m = hashlib.md5()

    while True:
        data = f.read(10240)
        if not data:
            break

        m.update(data)
    return m.hexdigest()


with open(YOUR_FILE, 'r') as f:
    file_md5 = get_file_md5(f)

文件sha1值 python python sha-1_python

(windows 用户 要使用 'rb'方式打开文件)

 

大家可以用下面这段代码验证一下:

文件sha1值 python python sha-1_python

import hashlib

x = hashlib.md5()
x.update('hello, ')
x.update('python')
x.hexdigest()

hashlib.md5('hello, python').hexdigest()

文件sha1值 python python sha-1_python

 

这两次的输出是一样的。
SHA1 也是一样的用法。