毛会懂 - 博客园

2024年12月17日

摘要：前提：需要引入POI的jar包。 public class TemplateFileSheetParseVO { /** * 表名称 */ private String tableName; /** * 列名称 */ private List<String> columnNames;} privat 阅读全文

posted @ 2024-12-17 11:11 毛会懂阅读(49) 评论(0) 推荐(0)

2024年11月11日

WebMagic 抓取，selenium模拟点击操作，模拟将抓取的数据入库

摘要：动态页面爬虫前的准备：https://www.cnblogs.com/maohuidong/p/18517953 java 添加maven依赖： <dependency> <groupId>us.codecraft</groupId> <artifactId>webmagic-core</artif 阅读全文

posted @ 2024-11-11 13:52 毛会懂阅读(358) 评论(0) 推荐(0)

2024年11月7日

WebMagic抓取 table分页数据， table分页时，URL不变

摘要：动态页面爬虫前的准备：https://www.cnblogs.com/maohuidong/p/18517953 一：java添加maven依赖： <dependency> <groupId>us.codecraft</groupId> <artifactId>webmagic-core</arti 阅读全文

posted @ 2024-11-07 18:29 毛会懂阅读(218) 评论(0) 推荐(0)

2024年10月31日

java.io.IOException: Invalid Status code=403 text=Forbidden报错解决

摘要：参考：https://blog.csdn.net/weixin_46739493/article/details/134163739 解决方式： // 创建一个Chrome浏览器实例ChromeOptions chromeOptions = new ChromeOptions();//解决 403 阅读全文

posted @ 2024-10-31 18:47 毛会懂阅读(123) 评论(0) 推荐(0)

WebMagic动态页面爬取

摘要：动态页面爬虫前的准备：https://www.cnblogs.com/maohuidong/p/18517953 一：java maven添加依赖： <dependency> <groupId>us.codecraft</groupId> <artifactId>webmagic-core</art 阅读全文

posted @ 2024-10-31 15:48 毛会懂阅读(320) 评论(0) 推荐(0)

webMagic静态页面的爬取

摘要：一：java maven依赖： <dependency> <groupId>us.codecraft</groupId> <artifactId>webmagic-core</artifactId> <version>0.7.4</version></dependency><dependency> 阅读全文

posted @ 2024-10-31 15:45 毛会懂阅读(30) 评论(0) 推荐(0)

win10 webMagic爬虫前的安装

摘要：一：win10安装python webMagic 动态页面可以通过selenium模拟，而selenium需要python环境运行，所以安装python。1、python下载地址：https://www.python.org/downloads/ 我下载的3.13版本2、双击安装时，选择定制安装，选阅读全文

posted @ 2024-10-31 15:38 毛会懂阅读(100) 评论(0) 推荐(0)

2024年10月28日

相似度算法

摘要： package com.rongyi.platform.game.web.data;import com.alibaba.fastjson.JSON;import java.util.ArrayList;import java.util.Arrays;import java.util.List;/* 阅读全文

posted @ 2024-10-28 15:48 毛会懂阅读(20) 评论(0) 推荐(0)

欧式距离

摘要： package com.rongyi.platform.game.web.data;import org.apache.commons.math3.stat.descriptive.moment.StandardDeviation;import java.util.Arrays;import jav 阅读全文

posted @ 2024-10-28 15:47 毛会懂阅读(28) 评论(0) 推荐(0)

时间差计算

摘要： ChronoUnit.SECONDS.between 阅读全文

posted @ 2024-10-28 10:49 毛会懂阅读(19) 评论(0) 推荐(0)