当前位置：首页
> python获取一个网页的所有图片
python获取一个网页的所有图片(python获取一个网页的所有图片和文字)
1、需要爬的网页实在太多太多了，而上面的代码太慢太慢了设想全网有N个网站，那么分析一下判重的复杂度就是N*logN，因为所有网页要遍历一次，而每次判重用set的话需要logN的复杂度OK，OK，我知道python的set实现是；print x # 这里可以看到报错的时候是 url 错误 dirpat...