urllib.request.urlretrieve()用于下载制定url内容到本地
函数:urllib.urlretrieve(url[, filename[, reporthook[, data]]])
参数说明:
url:外部或者本地url ,url中不要含有中文,好像会出错。
filename:指定了保存到本地的路径(如果未指定该参数,urllib会生成一个临时文件来保存数据);
reporthook:是一个回调函数,当连接上服务器、以及相应的数据块传输完毕的时候会触发该回调。我们可以利用这个回调函数来显示当前的下载进度。
data:指post到服务器的数据。该方法返回一个包含两个元素的元组(filename, headers),filename表示保存到本地的路径,header表示服务器的响应头。
抓取百度首页进行保存的例子如下:
1 from urllib import request 2 def fun(blocknum,blocksize,totalsize): 3 """ 4 blocknum:当前的块编号 5 blocksize:每次传输的块大小 6 totalsize:网页文件总大小 7 """ 8 percent = blocknum*blocksize/totalsize 9 if percent > 1.0: 10 percent = 1.0 11 percent = percent*100 12 print("download : %.2f%%" %(percent)) 13 url = "http://www.baidu.com" 14 path = r"C:\Users\Administrator\Desktop\download\sina.html" 15 request.urlretrieve(url, path, fun)