摘要: 一.搭建大数据开发环境 我电脑的开发环境为(windows系统下 hadoop-2.7.1+spark-2.2.0+scala-2.11.12+jdk-8u261+Apache-hive-2.1.1+MYSQL 5.6.35+IDEA 2019) 1.官网下载hadoop-2.7.1.tar.gz、 阅读全文
posted @ 2021-01-22 16:40 枫露之茗 阅读(186) 评论(0) 推荐(0) 编辑
摘要: springcloud-alibaba组件: nacos:注册中心、配置中心。关于注册中心可以对比springcloud-Netflix的注册中心Eureka和dubbo的zookeeper,看看它们之间的区别,关于CAP的一些理解;而配置中心是取代了springcloud config。(需要下载 阅读全文
posted @ 2020-11-20 12:38 枫露之茗 阅读(2227) 评论(0) 推荐(0) 编辑
摘要: java程序调用webservice接口推送告警信息给微信,打成jar后部署到服务器上运行会出现ClassNotFoundException [java.lang.ClassNotFoundException: com/sun/tools/internal/xjc/api/XJC] 原因: jre/ 阅读全文
posted @ 2020-10-14 15:34 枫露之茗 阅读(2982) 评论(0) 推荐(0) 编辑
摘要: Stream API常用方法: Stream操作分类 中间操作 无状态 unordered() filter() map() mapToInt() mapToLong() mapToDouble() flatMap() flatMapToInt() flatMapToLong() flatMapTo 阅读全文
posted @ 2020-08-22 10:45 枫露之茗 阅读(423) 评论(0) 推荐(0) 编辑
摘要: 众所周知,springboot搭建项目相对于spring来说简单快速,因为springboot的原则是约定大于配置,及springboot实现了自动配置。这对于程序员来说大大简化了开发,今天就去看看它是怎么实现的。 搭建一个简单的springboot项目,在项目目录下可以看到一个springboot 阅读全文
posted @ 2020-08-10 20:29 枫露之茗 阅读(133) 评论(0) 推荐(0) 编辑
摘要: 在高并发系统中,存在着巨大的挑战,大流量高并发的访问。一些常见的有天猫的双十一、京东618、秒杀以及延时促销等。短时间内的如此巨大的访问流量往往会给数据库造成巨大的压力,进而影响服务器端的稳定性,那么我们的解决方案包括有: 前端用nginx做负载均衡; 对服务器端访问频率较多的查询接口做redis缓 阅读全文
posted @ 2020-08-01 13:10 枫露之茗 阅读(325) 评论(0) 推荐(0) 编辑
摘要: 讲道理,在这之前还不知道什么是深度分页,直到上次逛博客园被某个标题所吸引。 深度分页以我个人的理解就是查询某个表的全部数据,并进行分页。初步一看,此功能似乎没有什么不妥之处,用户体验也是杠杠的,但是随着系统的运行时间的推移,当此表中的数据逐渐增多时,随机深度分页查询性能就会变得极差。当然我所说的是随 阅读全文
posted @ 2020-07-18 14:35 枫露之茗 阅读(418) 评论(0) 推荐(0) 编辑
摘要: 和上一篇相比,此项目的场景有所不同:需要采集机房的电表、温湿度、水浸和烟感的数据,首先通过通讯管理机先将数据直采,然后通过服务器采集程序采集通讯管理机上存储的数据并解析入库。 先说说这2个有什么不同,项目1中户外设备主动连接服务器,并定时通过指定端口发送报文,而此项目需要服务器去主动连接设备发送报文 阅读全文
posted @ 2020-07-11 12:16 枫露之茗 阅读(652) 评论(0) 推荐(0) 编辑
摘要: 先分享一下自己的经历。 去年7月进入新公司没多久,部门领导就给我分配了一个任务:给公司的一个户外设备写一个采集数据程序,将数据入库,然后做一个web端。因为领导是做.NET的,当时在来之前有和领导沟通过,领导的意思是希望来一个会网络编程和多线程,部门急需一个可以来做采集程序的java,我当时有点心虚 阅读全文
posted @ 2020-07-10 11:36 枫露之茗 阅读(1037) 评论(0) 推荐(0) 编辑
摘要: 在用netty框架做采集程序时,控制台有时会输出 WARN io.netty.channel.AbstractChannelHandlerContext -Failed to mark a promise as failure because it has failed already: Defau 阅读全文
posted @ 2020-06-29 11:44 枫露之茗 阅读(1411) 评论(0) 推荐(0) 编辑