摘要:
urlretrieve 没有超时,需要通过socket来设置 而且还需要为他设置连接池,所以直接改用requests来下载文件 写原生爬虫遇到问题 can`t start new thread 自己的机器上一直没问题没发现,到了别人的机器上暴漏出来了。 原因是原生的thread在执行完成后并没有销毁 阅读全文
posted @ 2019-08-07 13:43 李日天 阅读(1269) 评论(0) 推荐(0)
|
|
|
|
摘要:
urlretrieve 没有超时,需要通过socket来设置 而且还需要为他设置连接池,所以直接改用requests来下载文件 写原生爬虫遇到问题 can`t start new thread 自己的机器上一直没问题没发现,到了别人的机器上暴漏出来了。 原因是原生的thread在执行完成后并没有销毁 阅读全文
posted @ 2019-08-07 13:43 李日天 阅读(1269) 评论(0) 推荐(0) |
|