关于爬虫的制定

即使是很小的网站，也要考虑周全，不能太过于简单粗暴的爬取。

可能这次顺利爬取，等到第二次更新数据的时候，别人设置了反扒策略，自己就傻眼了

狮子搏兔，亦用全力。