Python 协程并发下载斗鱼美女图片(python培训)
Python 协程并发下载斗鱼美女图片(python培训)
爬虫技术第一步
作为爬虫技术第一步,就是可以使用爬取下载图片作为示例。 那么爬取图片,我们肯定去爬取美女图片作为第一步操作示例呀。 那么下面一个最重要的工作。 什么是最重要的工作?
当然是去寻找美女图片呀
去斗鱼找美女图片
这里跳过爬取页面,使用正则获取图片的url地址的步骤,直接找几张图片的url地址进行并发下载测试。
复制一个图片地址,使用浏览器打开看看。
好啦,多操作几个图片的url地址,我准备如下:
使用urllib库下载第一张图片
首先在ipython3测试一下urllib库:
In [1]: import urllib.request In [3]: req = urllib.request.urlopen(" In [4]: In [4]: req.read() Out[4]: b'\r\n
\r\n\t