用Python 写爬虫时应该注意哪些坑
发布网友
共2个回答
热心网友
爬虫是互联网上最常见的一种东西了吧。 爬虫这东西每天都在网上爬大量的信息，各大搜索引擎厂商每天都有上百万的爬虫在网络上活动，这些爬虫的作用就是给搜索引擎采集互联网上最新的内容，采集来的内容经过分类、加工之后，进入搜索引擎的索引。...
热心网友
IOError就说明你抓取的URL连接失效,在getpicture里加一个try except,无法打开链接时, 没有办法，继续执行下一个Url import sys try: urllib.urlretrieve(pictureurl,'%s.jpg' %x) except: print "Unexpected error:", sys.exc_info()[0]
