摘要: 构造方法 构造方法特点 方法名与类名相同 方法名前没有返回值类型的声明(void也没有) 方法中不能使用return语句返回一个值 创建对象时自动调用并执行 如果类中没有自定义构造方法,则java调用类的默认构造方法,将使用默认值来初始化成员变量 构造方法与一般方法区别 格式 构造方法和类名相同,并 阅读全文
posted @ 2016-11-15 09:20 邬家栋 阅读(190) 评论(0) 推荐(0) 编辑
摘要: 面向对象 面向对象思想 面向对象是相对面向过程而言 面向对象和面向过程都是一种思想 面向过程:强调的是功能行为 面向对象:将功能封装进对象,强调具备了功能的对象 面向对象是基于面向过程的 面向对象举例 举例1(冰箱) 面向过程:打开冰箱,存储冰箱,关闭冰箱 面向对象:冰箱(打开,存储,关闭) 举例2 阅读全文
posted @ 2016-11-15 09:17 邬家栋 阅读(244) 评论(0) 推荐(0) 编辑
摘要: Navicat连接hive 第一步:win下安装好mysql 第二步:win下安装Navicat 第三步:启动hadoop集群,启动hive 第四步:Navicat连接hive 在第四步中需先配置ssh,然后配置常规属性,最后点连接 配置ssh连接spark1节点 配置常规属性连接hive 注意:在 阅读全文
posted @ 2016-11-13 16:09 邬家栋 阅读(18642) 评论(0) 推荐(4) 编辑
摘要: hive基本概念 hive简介 hive是什么 Hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,并提供类SQL查询功能。 为什么使用hive 1)简单易上手。提供了类sql查询语言HQL,提供快速开发的能力。 2)避免了去写MapReduce,减少开发人员的学 阅读全文
posted @ 2016-11-13 13:38 邬家栋 阅读(1721) 评论(0) 推荐(0) 编辑
摘要: 由于前面安装版本过老,导致学习过程中出现了很多问题,今天安装了一个新一点的版本。安装结束启动时遇到一点问题,记录在这里。 第一步:hive 1.2安装 通过WinSCP将apache hive 1.2.1 bin.tar.gz上传到/usr/hive/目录下 第二步:安装mysql 第三步:在mys 阅读全文
posted @ 2016-11-12 10:46 邬家栋 阅读(1337) 评论(0) 推荐(0) 编辑
摘要: 第一步:hive安装 通过WinSCP将apache hive 0.13.1 bin.tar.gz上传到/usr/hive/目录下 第二步:安装mysql 第三步:在mysql上创建hive元数据库,并对hive进行授权 第四步:配置文件 测试hive hive show databases; hi 阅读全文
posted @ 2016-11-10 19:54 邬家栋 阅读(518) 评论(0) 推荐(0) 编辑
摘要: 把原先搭建的集群环境给删除了,自己重新搭建了一次,将笔记整理在这里,方便自己以后查看 第一步:安装主节点spark1 第一个节点:centos虚拟机安装,全名spark1,用户名hadoop,密码123456 ,虚拟机名称spark1 第二步:配置yum源 需经常使用yum安装软件,使用国内网易源速 阅读全文
posted @ 2016-11-08 19:15 邬家栋 阅读(1058) 评论(0) 推荐(0) 编辑
摘要: Hadoop生态系统的特点 1)源代码开源 2)社区活跃,参与者多 3)涉及分布式存储和计算的各方面 4)已得到企业界的验证 Hadoop构成 1) 分布式文件系统HDFS(Hadoop Distributed File System) 提供了高可靠性、高扩展性和高吞吐率的数据存储服务 2)资源管理 阅读全文
posted @ 2016-11-06 19:06 邬家栋 阅读(319) 评论(0) 推荐(0) 编辑
摘要: list集合的特点 1)有序(存储和取出的元素一直) 2)可重复 List子类的特点 ArrayList 有序,可重复 底层数据结构是数组 查询快,增删慢 线程不安全,效率高 Vector 有序,可重复 底层数据结构是数组 查询快,增删慢 线程安全,效率低 LinkedList 有序,可重复 底层数 阅读全文
posted @ 2016-11-05 19:45 邬家栋 阅读(158) 评论(0) 推荐(0) 编辑
摘要: 泛型 泛型:是一种把类型明确的工作推迟到创建对象或者调用方法的时候才去明确的特殊的类型,参数化类型,把类型当做参数一样的传递 好处: 1)把运行时期的问题提前到了编译器期间 2)避免了强制类型转换 3)优化了程序设计,解决了黄色警告线 例1:用ArrayList存储字符串元素,并遍历,用泛型改进 p 阅读全文
posted @ 2016-11-03 22:15 邬家栋 阅读(205) 评论(0) 推荐(0) 编辑