今天在用Streaming-Python处理一个MapReduce程序时，发现reducer失败，原因为耗费内存达到极限了！仔细查看代码时，发现有一个集合里保存着URL，而URL长度是比较长的，直接保存确实是耗费内存，于是想到用压缩存储，然后用的时候再解压，虽然处理时间增加，但是耗费内存大大降低！

具体就是使用zlib模块

import zlib
 
raw_data = http://www.mamicode.com/"hello,world,ooooooooooooxxxxxxxxxxx">
参考：http://my.oschina.net/1123581321/blog/176570
Python中字符串的解压缩