向着梦想奋斗

摘要： 在生产环境中很有可能有那么几个Region比较大，但是都运行在同一个Regionserver中。这个时候就需要手动将region移动到负载低的Regionserver中。步骤：1、找到要移动的region，记录红框的id值，这个是唯一的region ID2.查看RegionServer列表，并记录ip、端口、startcode#明显读请求不均衡3.我们需要将部分region移动到dn3这台Regi... 阅读全文

摘要： mvn deploy 报错：Return code is: 400, ReasonPhrase: Bad Request. -> TEST通过没有报错，但是最终部署到Nexus中时出现错误。后检查发现，pom中的上传releases 和 snapshots的配置颠倒了。要跟nexus上的配置一对一对应来自为知笔记(Wiz) 阅读全文

摘要： 最近在给公司搭建CDH集群，在测试集群性能时，写了一条简单的scan查询语句竟然把hbase集群的所有regionserver干趴下了。这让我云里雾里的飘飘然。背景介绍CDH集群，2台主节点、3台从节点。各组件公用资源。为了满足查询需要，对数据表做了多种查询条件索引。索引格式： timestamp_id dbid_hbaseid type_id故障说明在测试time... 阅读全文

摘要： <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"xsi:schemaLocation="http://maven.apache.org/PO 阅读全文

摘要： Intellij IDEA在创建java webapp的时候没有那么人性化，新手使用会处处碰壁。特此记录！一、File--New--project二、Next--输入GroupId、ArtifactIdarchetypeCatalog 设置internal （表示选择内网）三、Next--输入项目名称和路径四、Import Change右上角有个提示框，是否import change，应该选择。否... 阅读全文

摘要： 命令：sudo -u hdfs hdfs balancer默认会检查每个datanode的磁盘使用情况，对磁盘使用超过整个集群10%的datanode移动block到其他datanode达到均衡作用。指定阀值，该阀值是datanode节点的磁盘使用占整个集群的百分比。sudo -u hdfs hdfs balancer -threshold 5 #表示超过整个集群5%容量的节点进行均衡block设... 阅读全文

摘要： 1.安装 RHEL/CentOS/Oracle 5Navigate to this link and save the file in the /etc/yum.repos.d/ directory.RHEL/CentOS/Oracle 6Navigate to... 阅读全文

摘要： org.apache.hadoop.hbase.ClockOutOfSyncException: org.apache.hadoop.hbase.ClockOutOfSyncException: Server dn2.tysci.com,60020,1453972614463 has been rejected; Reported time is too far out of sync with ... 阅读全文

摘要： Spark是基于内存的分布式计算引擎，以处理的高效和稳定著称。然而在实际的应用开发过程中，开发者还是会遇到种种问题，其中一大类就是和性能相关。在本文中，笔者将结合自身实践，谈谈如何尽可能地提高应用程序性能。分布式计算引擎在调优方面有四个主要关注方向，分别是CPU、内存、网络开销和I/O，其具体... 阅读全文

摘要： 这两天新到一批机器，需要安装系统。买的机器没有光驱，只能使用U盘或者网络安装。为了方便，我使用UltraISO对U盘进行刻录制作了启动盘。一切都是那么顺利，安装完成了，没出现什么问题（毕竟安装系统很多年了）。拔掉U盘后重启，左上角一直在闪光标，找不到引导分区。我以为是磁盘的启动顺序不对，通过BIOS分别调整了顺序。启动还是有问题。试想以为是安装系统失败了，那再重新安装一次吧。插回U盘启... 阅读全文