博二爷 - 博客园

2020年2月2日

摘要： jieba库有三种模式精确模式、全模式、搜索引擎模式 - 精确模式：把文本精确的切分开，不存在冗余单词 - 全模式：把文本中所有可能的词语都扫描出来，有冗余 - 搜索引擎模式：在精确模式基础上，对长词再次切分应用实例：代码： 1 import jieba 2 3 file = open('E: 阅读全文

posted @ 2020-02-02 23:16 博二爷阅读(2128) 评论(0) 推荐(0)

百度百科简介爬取（含源代码、信息领域词频数据csv格式）

摘要：百度百科特征： https://baike.baidu.com/item/+“信息” 切记不要在要查找的字后面加‘/’ 简介代码XPATH： 1 String htmls=page.getHtml().xpath("//div[@class='lemma-summary']/html()").get 阅读全文

posted @ 2020-02-02 18:30 博二爷阅读(848) 评论(0) 推荐(0)

2020年2月1日

博客园博文爬取标签爬取（含源代码）

摘要：爬取思路： 1，在首页上爬取这些推荐博文：https://www.cnblogs.com/ 2，根据这些推荐博文进一步到发布这些推荐博文的博主主页中： 3，爬取标签的话可以查看这些博主的标签只用在博主主页后加一个/tag/就可以跳转到标签页中 4，如果要爬取内容的话，就可以进入这些博主的所有页面中阅读全文

posted @ 2020-02-01 22:49 博二爷阅读(412) 评论(0) 推荐(0)

2020年1月31日

xpath爬虫匹配 <li><a href='aaaa.html'>AAA</a></li> 路径

摘要：代码： 1 page.addTargetRequests( 2 page.getHtml().xpath("//div[@class='rinfo']/a/@href").all()); 实战代码：阅读全文

posted @ 2020-01-31 23:18 博二爷阅读(527) 评论(0) 推荐(0)

最简单，小白易上手 ajax请求数据库信息，echarts页面显示，无需跳转servlet

摘要： ajax 代码： $.ajax({ type : "post", async : true, url : "${pageContext.request.contextPath}/charts", type:"POST", data: { "method":"huizhu" }, dataType:" 阅读全文

posted @ 2020-01-31 21:54 博二爷阅读(274) 评论(0) 推荐(0)

北京市民信件大数据简单分析可视化（附加源码）同含爬虫代码

摘要：含有最简单的页面ajax 申请数据库数据，echarts显示示例图：源代码：https://github.com/Smartisa/beijingparse DEMO 阅读全文

posted @ 2020-01-31 21:28 博二爷阅读(349) 评论(0) 推荐(0)

echart 横轴上下分开显示

摘要：代码： 1 xAxis: [ 2 { 3 type: 'category', 4 data:[], 5 axisLabel: { 6 interval: 0, 7 formatter:function(value) 8 { 9 debugger 10 var ret = "";//拼接加\n返回的类阅读全文

posted @ 2020-01-31 18:34 博二爷阅读(941) 评论(0) 推荐(0)

echart 横轴倾斜

摘要：代码： 1 xAxis: [ 2 { 3 type: 'category', 4 data:[], 5 axisLabel: { 6 interval:0, 7 rotate:40 8 }, 9 grid: { 10 left: '10%', 11 bottom:'35%' 12 } 13 14 } 阅读全文

posted @ 2020-01-31 18:32 博二爷阅读(614) 评论(0) 推荐(0)

echarts 柱状图横轴（x轴）数量太多，可以加一个滚动轴

摘要：代码： 1 dataZoom : [ 2 3 { 4 5 type: 'slider', 6 7 show: true, 8 9 start: 94, 10 11 end: 100, 12 13 handleSize: 8 14 15 }, 16 17 { 18 19 type: 'inside', 阅读全文

posted @ 2020-01-31 18:29 博二爷阅读(4983) 评论(0) 推荐(0)

2020年1月30日

错误: 找不到或无法加载主类 org.apache.sqoop.Sqoop

摘要：环境 hadoop 2.5.2 sqoop 1.4.7 异常解决方案：千万不要信什么一：sqoop目录下的sqoop-1.4.4.jar拷贝到hadoop的lib目录下解决二：把sqoop的lib目录下的sqoop的(sqoop-1.4.5.jar或sqoop-1.4.6.jar)包放到ha 阅读全文

posted @ 2020-01-30 18:07 博二爷阅读(4177) 评论(0) 推荐(0)

Smartisan

公告