python 并发下载器实现方法示例
本文实例讲述了python并发下载器实现方法。分享给大家供大家参考,具体如下:
并发下载器
并发下载原理
fromgeventimportmonkey importgevent importurllib.request #有耗时操作时需要 monkey.patch_all() defmy_downLoad(url): print('GET:%s'%url) resp=urllib.request.urlopen(url) data=resp.read() print('%dbytesreceivedfrom%s.'%(len(data),url)) gevent.joinall([ gevent.spawn(my_downLoad,'http://www.baidu.com/'), gevent.spawn(my_downLoad,'http://www.itcast.cn/'), gevent.spawn(my_downLoad,'http://www.itheima.com/'), ])
运行结果
GET:http://www.baidu.com/
GET:http://www.itcast.cn/
GET:http://www.itheima.com/
111327bytesreceivedfromhttp://www.baidu.com/.
172054bytesreceivedfromhttp://www.itheima.com/.
215035bytesreceivedfromhttp://www.itcast.cn/.
从上能够看到是先发送的获取baidu的相关信息,然后依次是itcast、itheima,但是收到数据的先后顺序不一定与发送顺序相同,这也就体现出了异步,即不确定什么时候会收到数据,顺序不一定
实现多个视频下载
fromgeventimportmonkey importgevent importurllib.request #有IO才做时需要这一句 monkey.patch_all() defmy_downLoad(file_name,url): print('GET:%s'%url) resp=urllib.request.urlopen(url) data=resp.read() withopen(file_name,"wb")asf: f.write(data) print('%dbytesreceivedfrom%s.'%(len(data),url)) gevent.joinall([ gevent.spawn(my_downLoad,"1.mp4",'http://oo52bgdsl.bkt.clouddn.com/05day-08-%E3%80%90%E7%90%86%E8%A7%A3%E3%80%91%E5%87%BD%E6%95%B0%E4%BD%BF%E7%94%A8%E6%80%BB%E7%BB%93%EF%BC%88%E4%B8%80%EF%BC%89.mp4'), gevent.spawn(my_downLoad,"2.mp4",'http://oo52bgdsl.bkt.clouddn.com/05day-03-%E3%80%90%E6%8E%8C%E6%8F%A1%E3%80%91%E6%97%A0%E5%8F%82%E6%95%B0%E6%97%A0%E8%BF%94%E5%9B%9E%E5%80%BC%E5%87%BD%E6%95%B0%E7%9A%84%E5%AE%9A%E4%B9%89%E3%80%81%E8%B0%83%E7%94%A8%28%E4%B8%8B%29.mp4'), ])
上面的url可以换为自己需要下载视频、音乐、图片等网址
更多关于Python相关内容可查看本站专题:《PythonSocket编程技巧总结》、《Python数据结构与算法教程》、《Python函数使用技巧总结》、《Python字符串操作技巧汇总》、《Python入门与进阶经典教程》及《Python文件与目录操作技巧汇总》
希望本文所述对大家Python程序设计有所帮助。
声明:本文内容来源于网络,版权归原作者所有,内容由互联网用户自发贡献自行上传,本网站不拥有所有权,未作人工编辑处理,也不承担相关法律责任。如果您发现有涉嫌版权的内容,欢迎发送邮件至:czq8825#qq.com(发邮件时,请将#更换为@)进行举报,并提供相关证据,一经查实,本站将立刻删除涉嫌侵权内容。