函数:urllib.urlretrieve(url[, filename[, reporthook[, data]]])
参数说明: url:外部或者本地url filename:指定了保存到本地的路径(如果未指定该参数,urllib会生成一个临时文件来保存数据); reporthook:是一个回调函数,当连接上服务器、以及相应的数据块传输完毕的时候会触发该回调。我们可以利用这个回调函数来显示当前的下载进度。 data:指post到服务器的数据。该方法返回一个包含两个元素的元组(filename, headers),filename表示保存到本地的路径,header表示服务器的响应头。抓取百度首页进行保存的例子如下:
1 from urllib import request 2 def fun(blocknum,blocksize,totalsize): 3 """ 4 blocknum:当前的块编号 5 blocksize:每次传输的块大小 6 totalsize:网页文件总大小 7 """ 8 percent = blocknum*blocksize/totalsize 9 if percent > 1.0:10 percent = 1.011 percent = percent*10012 print("download : %.2f%%" %(percent))13 url = "http://www.baidu.com"14 path = r"C:\Users\Administrator\Desktop\download\sina.html"15 request.urlretrieve(url, path, fun)