爬虫基础

1.序列化操作（cpickle 与 pickle 工能一样但是效率高）   pickle  是序列化     成字节

注意dump /load     和   dumps/loads 的区别

try:
    import cPickle as pickle
except ImportError:
    import pickle

　　

2.进程和线程

多进程：os.fork      multiprocessing

进程间数据传输      queue    pipe

 

多线程

协程（gevent）