糗事百科小爬虫

目标： 

        通过selenium访问糗事百科，定位一组对象的方式，打印首页内容

---------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------

 

如果要在抓取的内容前加入下标循环怎么办？Python内置的enumerate函数可以把一个list变成索引-元素对，这样就可以在for循环中同时迭代索引和元素本身：

>>> for i,value in enumerate(['A','B','C']):
...     print(str(i)+','+value)
... 
0,A
1,B
2,C

 

 

qiushibaike.py

#coding: utf-8
from selenium import webdriver
class Qiubai:

    def __init__(self):
        self.dr = webdriver.Firefox()
        #self.dr = webdriver.PhantomJS()
        # self.dr = webdriver.Chrome()
        self.dr.get('http://www.qiushibaike.com/')

    def print_content(self):
        self.dr.implicitly_wait(30)
        main_content = self.dr.find_element_by_id('content-left')
        for i,content in enumerate(main_content.find_elements_by_class_name('content')):
            try:
                print(str(i) + ". " + content.text)
            except UnicodeEncodeError:
                continue
        self.quit()

    def quit(self):
        self.dr.quit()

Qiubai().print_content()

 执行文件，小爬虫就做好了，下午茶的快乐时间。。。

 

参考：

    乙醇的cnblog