首页 > 代码库 > 用python调用七牛的fetch接口保存网络上的图片
用python调用七牛的fetch接口保存网络上的图片
需求说明
七牛是个好东西
免费10G空间10G下载流量10w上传请求100w下载请求 自带CDN和图片处理 对于个人用户和创业公司来说是个很好的平台
本文主要是解决 服务器端请求七牛对网络某文件进行保存这一业务需求
这里是七牛文章中对Fetch API的说明。写的有点复杂,不过用Python sdk比较简单
SDK安装
一般安装
七牛的Python sdk支持 pip 和 easy_install 安装,包名是 qiniu 即:
pip install qiniu esay_install qiniu
他们也把SDK托管在GitHub上这里是SDK的下载
SAE环境安装
对于SAE用户,安装好sae python本地环境后在项目目录(就是有config.yaml 和 index.wsgi的目录)运行:
saecloud install qiniu本地环境就会将七牛SDK下载到项目目录的site-packages文件夹中。
修改index.wsgi文件,添加如下代码到文件开头
import os import sys root = os.path.dirname(__file__) sys.path.insert(0, os.path.join(root, 'site-packages'))这样就安装完毕了
写Fetch函数
调用api需要用到七牛的access_key和secret_key。这两个key可以在七牛后台的账号设置中查到。将自己的key填到下面函数的相应位置就行了
def qiniufetch(url,bucket,filename): """调用七牛的fetch API 将url的图片存储到七牛""" from base64 import urlsafe_b64encode as b64e from qiniu.auth import digest access_key = "****************************************" secret_key = "****************************************" encoded_url = b64e(url) dest_entry = "%s:%s" % (bucket, filename) encoded_entry = b64e(dest_entry.encode('utf-8')) api_host = "iovip.qbox.me" api_path = "/fetch/%s/to/%s" % (encoded_url, encoded_entry) mac = digest.Mac(access=access_key, secret=secret_key) client = digest.Client(host=api_host, mac=mac) ret, err = client.call(path=api_path) if err is not None: print "Fetch image file\"%s\" failed" % url print err return None else: print "Fetch \"%s\" to qiniu \"%s\" success!" % (url,dest_entry) return "http://%s.qiniudn.com/%s" % (bucket,urllib.quote(filename.encode('utf-8')))
url 要保存文件的url
bucket 要保存到的bucket
filename 要保存的文件名*(有时候也被称为key)
* 注意文件名可以包含反斜杠,因此可以实现伪目录结构
返回值:
保存失败会打印失败的url和相应的错误,并返回None
保存成功会返回在文件在七牛的URL(方便入数据库)
调用Fetch函数
你可以通过传进不同的值来实现保存到不同的地方,譬如我实现了保存到七牛和SAE Storage两个不同地方,通过get传入的值不同,保存到不同的地方。这里只是我在一个crawler中的示例,仅供参考
if info['avatr_src']: if avatar_urlfactory: info['avatr_src'] = avatar_urlfactory(info['avatr_src']) if saveto == 'qiniu': filename = "%s/%s-%s.%s" % (prefix, info['name'], todaystr, info['avatr_src'].split('.')[-1]) info["avatar"] = qiniufetch(info['avatr_src'],'akb-member',filename) elif saveto == 'storage': filename = "%s/%s-%s.%s" % (prefix, info['name'], todaystr, info['avatr_src'].split('.')[-1]) info["avatar"] = retrieve(info['avatr_src'],'avatar',filename)
总结
其实是很简单的,不过是翻翻文档的事情而已,Fetch函数也是参考了SDK中的示例
不过七牛真是个好东西。如果你没有七牛账号可以来这里注册
用python调用七牛的fetch接口保存网络上的图片
声明:以上内容来自用户投稿及互联网公开渠道收集整理发布,本网站不拥有所有权,未作人工编辑处理,也不承担相关法律责任,若内容有误或涉及侵权可进行投诉: 投诉/举报 工作人员会在5个工作日内联系你,一经查实,本站将立刻删除涉嫌侵权内容。