摘要: 在使用Spark时经常需要把数据落入HBase中,如果使用普通的Java API,写入会速度很慢。还好Spark提供了Bulk写入方式的接口。那么Bulk写入与普通写入相比有什么优势呢? BulkLoad不会写WAL,也不会产生flush以及split。 如果我们大量调用PUT接口插入数据,可能会导 阅读全文
posted @ 2017-05-08 11:52 华电少年 阅读(4884) 评论(1) 推荐(1) 编辑
摘要: zookeeper 3.4.8 安装在 7 台不同的虚拟机上,配置文件如下: myid文件全部配置正确,防火墙已经关闭,但是启动时报出如下错误: Cannot open channel to 6 at election address slave4...... 不仅仅是 slave4,全部的节点都出 阅读全文
posted @ 2016-09-28 21:30 华电少年 阅读(6443) 评论(0) 推荐(0) 编辑
摘要: 公司部署了三台虚拟机用来跑CDH的套件,不过一次重启后突然CDH就起不来了。查看zookeeper的日志文件,就是 connection refused,感觉很莫明。 后来查看了 slave2的日志发现了: 竟然是时钟同步问题! 运行: 解决问题... 由此问题引发的思考,以后在管理这种集群时,一定 阅读全文
posted @ 2016-09-05 17:39 华电少年 阅读(455) 评论(0) 推荐(0) 编辑
摘要: 一.背景:因为公司虚拟机 (/) 目录容量过小,导致一些任务不能正常执行,需要给虚拟机扩容 二.操作: 初始磁盘情况: 1.使用 df 命令查看磁盘与目录的容量: 2.使用 fdisk -l 命令查看磁盘分区: 发现执行 fdisk -l 显示的第一行,显示出的 /dev/xvdb 分区,并没有被使 阅读全文
posted @ 2016-09-04 19:44 华电少年 阅读(5049) 评论(0) 推荐(0) 编辑
摘要: 删除本地.m2仓库中 org.apache.maven.plugins:maven-resources-plugin所在目录。 然后右击项目 Maven->Update Project->勾选 Force Update of Snapshots/Releases 阅读全文
posted @ 2016-08-18 13:15 华电少年 阅读(44152) 评论(1) 推荐(2) 编辑
摘要: MySQL 5.7 在Windows 下安装的过程很多人都写过了 但是安装完成后用 root 第一次登录时需要密码 可是我根本就没设密码嘛... 搞了半天最后终于搞定了 在执行 mysqld --initialize --console 这条命令时会生成一个临时密码... 会出现一个类似于 [Not 阅读全文
posted @ 2016-07-19 17:20 华电少年 阅读(634) 评论(0) 推荐(0) 编辑
摘要: 我的笔记本装了Windows7和Debian双系统后,在Windows7下,插入耳机竟然没有声音。 按常规思路分析:首先考虑是耳机问题还是笔记本电脑问题。确定耳机没问题后问题就在笔记本身上了。而问题在笔记本身上,先考虑是硬件问题还是软件问题。因为在Linux系统下是可以播放音乐等的,所以耳机插孔肯定 阅读全文
posted @ 2016-05-31 15:56 华电少年 阅读(638) 评论(0) 推荐(0) 编辑
摘要: 在MySQL中 EXISTS 和 IN 的用法有什么关系和区别呢?假定数据库中有两个表 分别为 表 a 和表 bcreate table a(a_id int,a_name varchar(20))create table b(b_id int,b_name varchar(20))那么select... 阅读全文
posted @ 2016-01-13 21:56 华电少年 阅读(19454) 评论(0) 推荐(0) 编辑
摘要: 访问 .py文件的网页的时候会出现 Exec format error的问题,一般情况下是由于基于Unix(Linux,Mac OS)系统下的问题,办法如下1 .chmod +x filename filename是要访问的文件名称,设置了以后文件具有可执行权限才能被web服务器访问2.在程序第一... 阅读全文
posted @ 2016-01-03 15:25 华电少年 阅读(20550) 评论(0) 推荐(0) 编辑
摘要: 一般情况下很多人限制textarea的输入字数会使用 onkeyup 或 onchange事件,但是这两种事件都带有明显的不足。onkeyup 事件只能监听键盘事件,而对于用户的粘贴毫无办法;而onchange事件只有等用户的焦点离开文本框之后才会触发。oninput事件可以很好的适用与这种情况,不... 阅读全文
posted @ 2015-12-11 13:51 华电少年 阅读(358) 评论(0) 推荐(0) 编辑