摘要： avro文件是常用的一种文件类型，它跟json文件一样存储了文件的元信息，它可以方便的进行序列化和反序列化。 写avro文件 写avro文件主要包括三步，第一步创建avro文件的schema，第二步创建avro文件的输出，第三步将要写入avro文件的数据按照schema写出去。 1.创建schema 阅读全文

摘要： 有时候需要构建动态的byte数组去接收数据，比如传入一个inputStream对象，需要返回一个byte数组，这种情况下就需要使用动态byte数组。 实现方式如下：定义一个ByteArrayOutputStream对象，将数据写入其中，最后将其转换为byte数组返回。 PS：之前用的方法是定义一个S 阅读全文

摘要： 1.创建虚拟机 2.安装操作系统 3.配置IP，使用vim /etc/sysconfig/network-scripts/ifcfg-eth0 命令编辑，设置ONBOOT=yes，BOOTPROTO=static，IPADDR=192.168.80.251，IPV6INIT=no，NETMASK=2 阅读全文

摘要： 需求 创建一个nifi处理器，根据自己的业务需求编写处理器的功能，集成到nifi中，进行数据的处理。 网上有很多相关的资料可供参考，但是大家都懂得，跟着网上的做总是会出现这样那样的问题，不是网上讲的不对，而是可能不够全，或者自己的情况与其并不相同，在经过半天的研究之后，终于搞定了这个问题，现将过程记 阅读全文

摘要： 对象进行老年代的方法有哪些1.对象需要占用连续的大内存（大于阈值），则直接分配到老年代。2.对象在新生代生成，本身所占内存大于Survivor内存，则在发生GC时，会直接进入老年代。3.对象在新生代生成，本身所占内存小于Survivor内存，则发生GC时，移入Survivor中，之后每熬过一次GC， 阅读全文

摘要： JVM堆内存回收（HotSpot） 分为两个大区域：新生代和老年代，一般比例为1:2 新生代使用“复制算法”进行回收，因此新生代分为三个区域：Eden，Survivor1，Survivor2，比例为8:1:1，实现该复制算法的过程为：在Eden和一个Survivor1内存中产生新的对象，然后当这两个 阅读全文

摘要： 使用场景 在linux命令行模式下，需要登录到FTP服务器上获取文件到本地 方法 使用命令ftp ip登录ftp服务器，其中ip为ftp服务器所在的机器ip，按照提示输出账户名和密码即可登录ftp服务器。 使用dir命令查看当前ftp的目录及文件。 使用cd dir命令进入ftp目录。 使用bin命 阅读全文

摘要： 使用场景 在windows下验证某个机器上的某个端口（某个服务）是否打开。 方法 使用telnet ip port命令即可，其中ip为机器的ip，port为端口号。 输入完命令后回车，若能进入新窗口则表示端口开放且能连接，否则会提示连接不上。 阅读全文

摘要： 使用场景 需要将sqlserver数据库中的表数据导出到txt中，或将txt中的数据导入到sqlserver数据库的表中。 方法 使用bcp的命令进行。具体使用方法请百度。 1.进入cmd命令窗口，使用以下命令 bcp table out/in filePath –c –U”sa” –P”12345 阅读全文

摘要： Linux下Java发送post请求，header为application/x-www-form-urlencoded。 1.添加依赖 <dependency> <groupId>commons-httpclient</groupId> <artifactId>commons-httpclient< 阅读全文