摘要: 利用fastjson 可以将对象转换为 json String,并可以将 json String 转为相应的对象 要转换为json String 的对象一定要有set get 方法, JSON.parseObject 可以将json string 转为对应的object 该方法有两个参数 JSON. 阅读全文
posted @ 2018-12-20 12:00 言下忘言 阅读(349) 评论(0) 推荐(0)
摘要: Exception 的 printStackTrace有一个重载的方法可以传入PrintWriter,如果在PrintWriter 中放入ByteArrayOutputStream,就可以把内容缓存在ByteArrayOutputStream, 当调用ByteArrayOutputStream 的t 阅读全文
posted @ 2018-12-17 14:33 言下忘言 阅读(590) 评论(0) 推荐(0)
摘要: 输出如下: 阅读全文
posted @ 2018-12-13 16:36 言下忘言 阅读(383) 评论(1) 推荐(0)
摘要: 有时候我们需要用到正则来截取我们想要的字符串,Matcher 下有find() 和 matches() 有何区别, find 方法判断的是 s 中是否包含给定正则,而matches 方法判断整个 s 是否符合 pattern, public static void main(String[] arg 阅读全文
posted @ 2018-12-13 16:34 言下忘言 阅读(174) 评论(0) 推荐(0)
摘要: 这里读取ftp文件的时候我们采用了sc.wholeTextFiles() 方法,若使用textFile() 方法,则会报错“java.io.IOException: Seek not supported”,ftp 的 InputStream 不支持seek(long:Long) 方法 阅读全文
posted @ 2018-12-13 14:42 言下忘言 阅读(2852) 评论(0) 推荐(0)
摘要: 今日焦点 month-to-month 按月 6-month minimum 至少六个月 sublease 转租 drenched in sunlight 阳光充足的 词汇实践 I am looking for an apartment I can rent month-to-month. 我想找一 阅读全文
posted @ 2018-12-02 22:06 言下忘言 阅读(424) 评论(0) 推荐(0)
摘要: 1.序列化 对象在进行网络传输或进行持久化时需要进行序列化,如果采用序列化慢或者消耗大量字节的序列化格式,则会拖慢计算。 spark 提供了两种序列化类库 1). Java serialization 灵活,但是很慢 2) Kryo serialization 比java 快10倍,紧凑,不支持所有 阅读全文
posted @ 2018-11-29 00:02 言下忘言 阅读(339) 评论(0) 推荐(0)
摘要: 最近在做一个需求,当spark程序在读数据或写数据时,将所读的条数或或所写的条数实时的展现出来,这里用到了SparkListener,sparklisten 可以获取spark 各个运行阶段的状态。 首先我们先通过代码来分析下各个方法的功能,再来说思路 package org.apache.spar 阅读全文
posted @ 2018-11-28 00:27 言下忘言 阅读(3473) 评论(0) 推荐(1)
摘要: 1.给关键词加双引号 此时关键词不会被拆分 比如搜索 “百度高级搜索” 2.指定搜索网站,假如我们要搜索关键词spark,但是我们只想查看出现在csdn的结果,可用如下语法 site:domain 关键词 ,比如:site:csdn.net spark 3.intitle allintitlw 关键 阅读全文
posted @ 2018-11-20 22:53 言下忘言 阅读(1688) 评论(0) 推荐(0)
摘要: 1.添加用户 如下命令是用root执行的 会直接在/home 目录创建 dong 目录 2.将用户划分到某个组 3.ifconfig 查看可用的网卡接口 4.启动网卡eth0 5.更改软件安装源添加阿里云和中科大源 6.安装搜狗输入法 0)apt-get update 1).apt-get inst 阅读全文
posted @ 2018-11-12 10:27 言下忘言 阅读(2546) 评论(0) 推荐(0)