会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
大葱拌豆腐
专注于Spark、Flink、Kafka、HBase、大数据、机器学习
博客园
首页
新随笔
联系
订阅
管理
上一页
1
···
38
39
40
41
42
43
44
45
下一页
2016年10月27日
选择两个字段时distinct位置的影响
摘要: 当选择两个字段时,例如:"select XX1, XX2 from tb; ",那么将distinct放在前一个字段XX1之前和放在后一个字段XX2之前,结果有什么不同呢? 先说结论:如果将distinct放在前一个字段之前,则会返回对两个字段的组合去重后的结果;而如果将distinct放在后一个字
阅读全文
posted @ 2016-10-27 15:22 大葱拌豆腐
阅读(3026)
评论(0)
推荐(1)
2016年10月14日
分布式MySQL集群方案的探索与思考
摘要: 转载:http://www.infoq.com/cn/articles/exploration-of-distributed-mysql-cluster-scheme?utm_campaign=rightbar_v2&utm_source=infoq&utm_medium=articles_link
阅读全文
posted @ 2016-10-14 11:15 大葱拌豆腐
阅读(261)
评论(0)
推荐(0)
分布式系统事务一致性解决方案
摘要: 转载:http://www.infoq.com/cn/articles/solution-of-distributed-system-transaction-consistency 开篇 在OLTP系统领域,我们在很多业务场景下都会面临事务一致性方面的需求,例如最经典的Bob给Smith转账的案例。
阅读全文
posted @ 2016-10-14 10:54 大葱拌豆腐
阅读(224)
评论(0)
推荐(0)
2016年10月13日
Centos 7.1+CDH5.7.2全部署流程
摘要: 前期准备: JDK环境 版本:jdk-8u101-linux-x64.rpm 下载地址:oracle官网 mysql rpm包:http://dev.mysql.com/get/Downloads/MySQL-5.6/MySQL-5.6.26-1.linux_glibc2.5.x86_64.rpm-
阅读全文
posted @ 2016-10-13 10:46 大葱拌豆腐
阅读(4461)
评论(1)
推荐(1)
2016年10月12日
配置NTP服务ntpd/ntp.conf(搭建Hadoop集群可参考)
摘要: 本文拟定是在一个局域网内(比如一个Hadoop集群)设定一台NTP服务器作为整个网络的标准时间参考,使用网络(集群)内的所有机器保持时间一致!以下是详细的操作步骤: 1. 修改选定的服务器的本地时间 #date -s '2014-11-21 12:48:30' +'%F %T' #2014-11-2
阅读全文
posted @ 2016-10-12 14:49 大葱拌豆腐
阅读(1567)
评论(0)
推荐(0)
Centos 7配置ntp时间同步
摘要: 1.NTP时钟同步方式说明 NTP在linux下有两种时钟同步方式,分别为直接同步和平滑同步: 1)直接同步 使用ntpdate命令进行同步,直接进行时间变更。如果服务器上存在一个12点运行的任务,当前服务器时间是13点,但标准时间时11点,使用此命令可能会造成任务重复执行。因此使用ntpdate同
阅读全文
posted @ 2016-10-12 14:40 大葱拌豆腐
阅读(949)
评论(0)
推荐(0)
2016年8月28日
网站统计中的数据收集原理及实现
摘要: 转载自:http://blog.sina.com.cn/s/blog_62b832910102w5mx.html Avinash Kaushik将点击流数据的获取方式分为4种:log files、web beacons、JavaScript tags和packet sniffers,其中包嗅探器(p
阅读全文
posted @ 2016-08-28 19:24 大葱拌豆腐
阅读(1398)
评论(0)
推荐(0)
启动hadoop报ERROR org.apache.hadoop.hdfs.server.namenode.FSImage: Failed to load image from FSImageFile
摘要: 不知道怎么回事,今天在启动集群时通过jps查看进程时始终有一个standby namenode进程无法启动。查看日志时报的是不能加载fsimage文件。日志截图如下: 日志报的很明显了是不能加载元数据信息,解决方案: 解决办法: 1、手动copy namenode(active)所在的那台服务器上X
阅读全文
posted @ 2016-08-28 15:38 大葱拌豆腐
阅读(2919)
评论(0)
推荐(0)
2016年8月27日
淘宝(大数据库应用)--转载
摘要: 第一部分、mapreduce模式与hadoop框架深入浅出 架构扼要 想读懂此文,读者必须先要明确以下几点,以作为阅读后续内容的基础知识储备: 所以,你现在,知道了什么是mapreduce,什么是hadoop,以及这两者之间最简单的联系,而本文的主旨即是,一句话概括:在hadoop的框架上采取map
阅读全文
posted @ 2016-08-27 15:06 大葱拌豆腐
阅读(1767)
评论(0)
推荐(0)
2016年8月13日
MapReduce作业的map task和reduce task调度参数
摘要: MapReduce作业可以细分为map task和reduce task,而MRAppMaster又将map task和reduce task分为四种状态: 1、pending:刚启动但尚未向resourcemanager发送资源请求; 2、scheduled:已经向resourceManager发
阅读全文
posted @ 2016-08-13 22:21 大葱拌豆腐
阅读(1282)
评论(0)
推荐(0)
上一页
1
···
38
39
40
41
42
43
44
45
下一页
公告