jieba库的基本介绍及爬虫基本操作

jieba库基本介绍

jieba库的安装

pip install jieba (cmd命令行)

 

 

 

 

 

jieba分词的三种模式

精确模式、全模式、搜索引擎模式

精确模式:把文本精确的切分开,不存在冗余单词

全模式:把文本中所有可能的词语都扫描出来,有冗余

搜索引擎模式:在精确模式基础上,对长词再次切分

 

 

 爬虫(爬取哔哩哔哩视频弹幕)

导入模块

 

 

 爬取数据

 

posted @ 2019-10-28 20:12  Parado  阅读(749)  评论(0编辑  收藏  举报