2018年9月9日

Idea 使用
摘要： 一. 控制台打印乱码 第一步:修改intellij idea配置文件： 找到intellij idea安装目录，bin文件夹下面idea64.exe.vmoptions和idea.exe.vmoptions这两个文件，分别在这两个文件中添加：-Dfile.encoding=UTF-8 第二步：找到i 阅读全文
posted @ 2018-09-09 11:30 蓝鲸大数据 阅读(199) 评论(0) 推荐(0)
 

2018年9月8日

centOS
摘要： 第一项： 克隆 方法一、 1.注释掉eth0这一行，将第二条配置中的eth1改成eth0 2.删除vi /etc/sysconfig/network-script/ifcfg-eth0下的HWADDR 3.shutdown -r now重启生效 方法二： 1.ifconfig -a 查看所有网卡信息 阅读全文
posted @ 2018-09-08 10:40 蓝鲸大数据 阅读(202) 评论(0) 推荐(0)
 

2017年6月21日

Spark SQL External DataSource简介
摘要： 随着Spark1.2的发布，Spark SQL开始正式支持外部数据源。这使得Spark SQL支持了更多的类型数据源，如json, parquet, avro, csv格式。只要我们愿意，我们可以开发出任意的外部数据源来连接到Spark SQL。 示例： 存储json数据。 阅读全文
posted @ 2017-06-21 09:58 蓝鲸大数据 阅读(524) 评论(0) 推荐(0)
 

2017年6月20日

svn的使用
摘要： 1.安装 File -> settings... -> Version Control -> Subverion -> OK 等待安装完成。 2. checkPoint 检出svn文件 CVS -> Checkout from Version Control -> subverion -> + sv 阅读全文
posted @ 2017-06-20 13:35 蓝鲸大数据 阅读(135) 评论(0) 推荐(0)
 
积累
摘要： 一、注解 举个例子来说： 定义一个CustomObject类别，并在当中定义一个getSomething()方法， 而在一段时间之后，您不想使用这个方法 了，就在这个方法前添加注解 @deprectated 如果你在使用这个CustomObject时，还想使用getSomething方法，则进行编译 阅读全文
posted @ 2017-06-20 11:07 蓝鲸大数据 阅读(240) 评论(0) 推荐(0)
 
slf4j的使用2
摘要： 一、Log4J的配置文件(Configuration File)就是用来设置记录器的级别、存放器和布局的，它可接key=value格式的设置或xml格式的设置信息。通过配置，可以创建出Log4J的运行环境。 二、Log4J配置文件的基本格式如下： #配置根Loggerlog4j.rootLogger 阅读全文
posted @ 2017-06-20 10:49 蓝鲸大数据 阅读(412) 评论(0) 推荐(0)
 

2017年6月19日

slf4j的使用
摘要： 1.导入jar包 2.生成配置文件 src\main\resources\log4j.propertes 补充：文件格式为utf-8 （idea右下角显示） File ->settings... -> File Encoding ->IDE Encoding (UTF-8) Project Enco 阅读全文
posted @ 2017-06-19 23:06 蓝鲸大数据 阅读(296) 评论(0) 推荐(0)
 

2017年5月14日

hashMap
摘要： HashMap的工作原理 HashMap基于hashing原理，我们通过put()和get()方法储存和获取对象。 当我们将键值对传递给put()方法时，它调用键对象的hashCode()方法来计算hashcode，然后找到bucket位置来储存值对象。 当获取对象时，通过键对象的equals()方 阅读全文
posted @ 2017-05-14 14:04 蓝鲸大数据 阅读(160) 评论(0) 推荐(0)
 

2017年5月7日

HBase
摘要： 1、如何将MySQL数据批量导入HBase？ 一、加快批量写入的方法：新建一些空的regoins； 这样当数据写入HBase时，会按regoins的分区情况，集群内部负载均衡。 二、hbase 中有一个 hfileoutputformat 类，他的实现可以将数据转换成 hfile格式，通过 new 阅读全文
posted @ 2017-05-07 23:26 蓝鲸大数据 阅读(147) 评论(0) 推荐(0)
 

2017年4月29日

HBase应用快速开发
摘要： 有人说过“让Hadoop开发像家庭作业一样简单”，容器技术的出现让这成为可能，可以用Docker封装HBase运行环境，通过统一的接口来运行。本文将介绍如何在十分钟内跑起你的HBase应用。 首先，我们需要安装HBase集群来开发和测试，下载HBase源码运行单机版固然可以，前提是你已经安装配置好J 阅读全文
posted @ 2017-04-29 18:02 蓝鲸大数据 阅读(193) 评论(0) 推荐(0)
 
下一页
 
博客园  ©  2004-2025
浙公网安备 33010602011771号 浙ICP备2021040463号-3