2017年5月25日

摘要: 好久没有更新自己技术博客,现在开始工作了,把自己遇到的问题写到这里边来 主要把自己的问题写出来,分享给大家 sqoop 导入数据时候 有时候会遇到mysql 中有sql 中的关键字 这时候如果直接导出到hive 中会出现错误 例如下面的例子 这时候会出现错误 可以使用--query 来解决问题 例如 阅读全文
posted @ 2017-05-25 22:15 搬砖中 阅读(782) 评论(0) 推荐(0) 编辑

2016年8月20日

摘要: 学习mapreduce过程中, map第一个阶段是从hdfs 中获取文件的并进行切片,我自己在好奇map的启动的数量和文件的大小有什么关系,进过学习得知map的数量和文件切片的数量有关系,那文件的大小和切片的数量的有什么关系 ,下面我就进入Hadoop的源代码进行研究一下 文件的大小和切片的数量有什 阅读全文
posted @ 2016-08-20 16:27 搬砖中 阅读(2920) 评论(0) 推荐(0) 编辑

2016年7月10日

摘要: 最近在linux 学习c语言的编程,发现好多原来在vs 上的在linux 都编译不过去,今天就遇到了一个问题就是结构体的编译的问题, 结构体大概的定义是 struct Node{ int a; int b; }; 在利用gcc 编译的时候就显示 错误:‘Node’未声明(在此函数内第一次使用), 这 阅读全文
posted @ 2016-07-10 21:01 搬砖中 阅读(1379) 评论(0) 推荐(0) 编辑

2016年5月16日

摘要: 产品的易用程度如何,执行速度如何,可靠性如何,当发生异常情况时,系统如何处理。这些被称为软件质量属性,而特性是指系统非功能(也叫非行为)部分的需求。 性能:性能就是一个东西有多快,通常指响应时间或延迟。 响应时间:从发出请求到收到响应所用的时间,比如用户点击网页中的超链接或桌面应用程序中的按钮。 延 阅读全文
posted @ 2016-05-16 20:02 搬砖中 阅读(142) 评论(0) 推荐(0) 编辑
摘要: 实验一 框架选择及其原因 软件体系结构实验一我选择S2SH来开发应用系统。我来讲解一下 S2Sh的优点。 Struts Struts2 是一个优秀的开源项目 ,能使开发者了解到内部的机制, Struts开放源码框架的创建是为了使开发者在构建基于Java Servlet和JavaServer Page 阅读全文
posted @ 2016-05-16 17:35 搬砖中 阅读(253) 评论(0) 推荐(0) 编辑

2016年5月10日

摘要: 今天 重新启动opentsdb 出现本地配置文件不存在 这不知道 我查了一下官网 了解到 You can use the --config command line argument to specify the full path to a configuration file. Otherwis 阅读全文
posted @ 2016-05-10 19:49 搬砖中 阅读(512) 评论(0) 推荐(0) 编辑

2016年5月4日

摘要: Opentsdb分布式安装 --李琦 1.下载文件上传到虚拟机 -rw-r--r--. 1 root root 76793860 Apr 27 10:56 opentsdb-2.2.0.tar.gz 2解压文件 tar –zxvf opentsdb-2.2.0.tar.gz –C /usr/app 阅读全文
posted @ 2016-05-04 16:47 搬砖中 阅读(402) 评论(0) 推荐(0) 编辑

2016年4月28日

摘要: 1为什么要产生架构? 1.1必须由人执行的工作 1.2每个人的能力有限(每个人都有自己的强项,个人的产出受限于最短板,并且由于人的结构限制,同时只能专注于做好一件事情,比如虽然有两只眼睛,但是只能同时专注于一件事物,有两只手,无法同时做不同的事情。ps. 虽然有少部分人可以左手画圆右手画框,但是不是 阅读全文
posted @ 2016-04-28 16:48 搬砖中 阅读(149) 评论(1) 推荐(0) 编辑
摘要: 1.机器信息 五台centos 64位机器 2.集群规划 Server Name Hadoop Cluster Zookeeper Ensemble HBase Cluster Ip Hadoop01 Name node & Resource manager Master 192.168.12.60 阅读全文
posted @ 2016-04-28 11:33 搬砖中 阅读(2929) 评论(0) 推荐(0) 编辑

2016年4月27日

摘要: 1.机器信息 五台centos 64位机器 2.集群规划 Server Name Hadoop Cluster Zookeeper Ensemble HBase Cluster Hadoop01 Name node & Resource manager Master Hadoop02 Seconda 阅读全文
posted @ 2016-04-27 21:39 搬砖中 阅读(205) 评论(0) 推荐(0) 编辑

导航