2018年9月9日

摘要: 一. 控制台打印乱码 第一步:修改intellij idea配置文件: 找到intellij idea安装目录,bin文件夹下面idea64.exe.vmoptions和idea.exe.vmoptions这两个文件,分别在这两个文件中添加:-Dfile.encoding=UTF-8 第二步:找到i 阅读全文
posted @ 2018-09-09 11:30 蓝鲸大数据 阅读(190) 评论(0) 推荐(0) 编辑

2018年9月8日

摘要: 第一项: 克隆 方法一、 1.注释掉eth0这一行,将第二条配置中的eth1改成eth0 2.删除vi /etc/sysconfig/network-script/ifcfg-eth0下的HWADDR 3.shutdown -r now重启生效 方法二: 1.ifconfig -a 查看所有网卡信息 阅读全文
posted @ 2018-09-08 10:40 蓝鲸大数据 阅读(199) 评论(0) 推荐(0) 编辑

2017年6月21日

摘要: 随着Spark1.2的发布,Spark SQL开始正式支持外部数据源。这使得Spark SQL支持了更多的类型数据源,如json, parquet, avro, csv格式。只要我们愿意,我们可以开发出任意的外部数据源来连接到Spark SQL。 示例: 存储json数据。 阅读全文
posted @ 2017-06-21 09:58 蓝鲸大数据 阅读(511) 评论(0) 推荐(0) 编辑

2017年6月20日

摘要: 1.安装 File -> settings... -> Version Control -> Subverion -> OK 等待安装完成。 2. checkPoint 检出svn文件 CVS -> Checkout from Version Control -> subverion -> + sv 阅读全文
posted @ 2017-06-20 13:35 蓝鲸大数据 阅读(125) 评论(0) 推荐(0) 编辑
 
摘要: 一、注解 举个例子来说: 定义一个CustomObject类别,并在当中定义一个getSomething()方法, 而在一段时间之后,您不想使用这个方法 了,就在这个方法前添加注解 @deprectated 如果你在使用这个CustomObject时,还想使用getSomething方法,则进行编译 阅读全文
posted @ 2017-06-20 11:07 蓝鲸大数据 阅读(232) 评论(0) 推荐(0) 编辑
 
摘要: 一、Log4J的配置文件(Configuration File)就是用来设置记录器的级别、存放器和布局的,它可接key=value格式的设置或xml格式的设置信息。通过配置,可以创建出Log4J的运行环境。 二、Log4J配置文件的基本格式如下: #配置根Loggerlog4j.rootLogger 阅读全文
posted @ 2017-06-20 10:49 蓝鲸大数据 阅读(395) 评论(0) 推荐(0) 编辑

2017年6月19日

摘要: 1.导入jar包 2.生成配置文件 src\main\resources\log4j.propertes 补充:文件格式为utf-8 (idea右下角显示) File ->settings... -> File Encoding ->IDE Encoding (UTF-8) Project Enco 阅读全文
posted @ 2017-06-19 23:06 蓝鲸大数据 阅读(260) 评论(0) 推荐(0) 编辑

2017年5月14日

摘要: HashMap的工作原理 HashMap基于hashing原理,我们通过put()和get()方法储存和获取对象。 当我们将键值对传递给put()方法时,它调用键对象的hashCode()方法来计算hashcode,然后找到bucket位置来储存值对象。 当获取对象时,通过键对象的equals()方 阅读全文
posted @ 2017-05-14 14:04 蓝鲸大数据 阅读(152) 评论(0) 推荐(0) 编辑

2017年5月7日

摘要: 1、如何将MySQL数据批量导入HBase? 一、加快批量写入的方法:新建一些空的regoins; 这样当数据写入HBase时,会按regoins的分区情况,集群内部负载均衡。 二、hbase 中有一个 hfileoutputformat 类,他的实现可以将数据转换成 hfile格式,通过 new 阅读全文
posted @ 2017-05-07 23:26 蓝鲸大数据 阅读(134) 评论(0) 推荐(0) 编辑

2017年4月29日

摘要: 有人说过“让Hadoop开发像家庭作业一样简单”,容器技术的出现让这成为可能,可以用Docker封装HBase运行环境,通过统一的接口来运行。本文将介绍如何在十分钟内跑起你的HBase应用。 首先,我们需要安装HBase集群来开发和测试,下载HBase源码运行单机版固然可以,前提是你已经安装配置好J 阅读全文
posted @ 2017-04-29 18:02 蓝鲸大数据 阅读(182) 评论(0) 推荐(0) 编辑