霸王龙168

摘要： 之前做爬取动态canvas 是用selenuim写的 效果很不了理想 由于时间关系，让前端渲染截图转为base64发送到后端 最近比较有空 在网上找到了 无头浏览器 phantomjs 能做 比selenuim强 没打开页面渲染 但是也没强多少 内存和cpu占用还是比较高，速度也慢 下载phanto 阅读全文

摘要： 最近写了一点多线程 爬虫 爬取网站 对于 同步 异步 稍微有点了解 谢谢 同步阻塞 非常经典的 发请求 请求的数据需要10秒才能返回 此时 线程都在等待返回数据，不会日出cpu时间片 同步非阻塞 发请求 请求的数据需要十秒才能返回 线程让出cpu时间片 后面再去竞争 异步阻塞 我感觉这个没什么意义 阅读全文

摘要： 之前通过 jsoup 爬取一些静态的数据都可以 最近要爬一张动态渲染的地图 jsoup 爬不出来 只能用selenuim 打开浏览器截图了 selenuim 按照过程有点小坑 不知道为什么 需要按照额外的 guava 依赖 不然就报错 // WebElement canvas = driver.fi 阅读全文

摘要： 一开始是给了一坨 面的数据 需要将面按照街镇 进行分割 我想的是改库表 对geometry数据进行处理 后面发现了st_intersection 这个函数 求两个面的交集 就不用对表进行处理了 只要sql查询就可以了 大概sql select province_name, city_name, co 阅读全文

摘要： import org.jsoup.Jsoup; import org.jsoup.nodes.Element; import org.springframework.stereotype.Service; import java.io.ByteArrayOutputStream; import ja 阅读全文

摘要： 同事操作excel用了若依的工具类 但是这个工具类里面一个工作簿里面只能有一个sheet 不好用 稍微改了一下，加几个方法 变成支持多个sheet的 主要就是里面有个sheet成员变量 init初始化会创建一个新的workbook 和新建sheet 把init拆开 变成不会新建workbook 但是 阅读全文

摘要： 有个需求 根据前端传来的点和距离 查询 该范围内的数据 和返回距离 一开始是这样写的 select * ,st_distance('${前端传来的wkt}'::geography,${空间字段}::geography) as "与目标距离" from 表 where st_dwithin('${前端 阅读全文

摘要： 有个需求 需要将map排序 我就用了treemap 一个map列表 将总计字段放在最后面 其他无所谓 最开始是这样写的 Map<String,Object> temp = new TreeMap<>(new Comparator(){ @Override public int compare(Obj 阅读全文

摘要： 甲方给了一坨数据 和一坨大便差不多 空间字段完全不符合要求 需要手动清洗后入库 拿个简单的来说 甲方给的经纬度数据是一条条线 数据格式是这样的 113.089437,23.233682;113.091573,23.249744 需要将数据使用java转换为 wkt格式 再到数据库中转换为 wkb格式 阅读全文

摘要： 今天遇到一个小bug public class Demo extends Base{ public static void main(String[] args) throws ClassNotFoundException {// InheritedExtend extend = Demo.clas 阅读全文