2017年2月4日

摘要: import requests import threading class downloader: def __init__(self): self.url='http://51reboot.com/src/blogimg/pc.jpg' self.num=8 self.name=self.url.split('/')[-1] ... 阅读全文
posted @ 2017-02-04 17:42 vinchoi 阅读(133) 评论(0) 推荐(0)
摘要: import multiprocessing import time def func(msg): for i in xrange(3): print msg time.sleep(1) return "done " + msg if __name__ == "__main__": pool = multiprocessing.Pool... 阅读全文
posted @ 2017-02-04 17:40 vinchoi 阅读(71) 评论(0) 推荐(0)
摘要: 当使用requests的get下载大文件/数据时,建议使用使用stream模式。 当把get函数的stream参数设置成False时,它会立即开始下载文件并放到内存中,如果文件过大,有可能导致内存不足。 当把get函数的stream参数设置成True时,它不会立即开始下载,当你使用iter_cont 阅读全文
posted @ 2017-02-04 17:34 vinchoi 阅读(395) 评论(0) 推荐(0)

导航