摘要：
综述 java的几种对象(PO,VO,DAO,BO,POJO)解释: 一、PO:persistant object 持久对象,可以看成是与数据库中的表相映射的java对象。最简单的PO就是对应数据库中某个表中的一条记录，多个记录可以用PO的集合。PO中应该不包含任何对数据库的操作。 二、VO:val 阅读全文
posted @ 2018-01-24 08:56
淼淼之森
阅读(3005)
评论(0)
推荐(0)
摘要：
接口与抽象类的区别:1、抽象类和接口都不能直接实例化。如果要实例化，抽象类变量必须指向实现所有抽象方法的子类对象，接口变量必须指向实现所有接口方法的类对象。2、抽象类要被子类继承，接口要被类实现。3、接口只能做方法申明，抽象类中可以做方法申明，也可以做方法实现4、接口里定义的变量只能是公共的静态的常 阅读全文
posted @ 2018-01-23 12:09
淼淼之森
阅读(18792)
评论(1)
推荐(1)
摘要：
Map主要用于存储健值对，根据键得到值，因此不允许键重复(重复了覆盖了),但允许值重复。 Hashmap 是一个最常用的Map,它根据键的HashCode 值存储数据,根据键可以直接获取它的值，具有很快的访问速度，遍历时，取得数据的顺序是完全随机的。HashMap最多只允许一条记录的键为Null;允 阅读全文
posted @ 2018-01-22 18:13
淼淼之森
阅读(348)
评论(0)
推荐(0)
摘要：
html引用外部js和css css：<link rel="stylesheet" type="text/css" href="xx.css" /> js：<script type="text/javascript" src="xx.js"></script> 阅读全文
posted @ 2018-01-17 13:33
淼淼之森
阅读(5484)
评论(0)
推荐(0)
摘要：
Spark的核心RDD Resilient Distributed Datasets(弹性分布式数据集) Spark运行原理与RDD理论 Spark与MapReduce对比,MapReduce的计算和迭代是基于磁盘的,而Spark的迭代和计算是尽量基于内存,只有在内存空间不能容纳计算结果时才将溢出的 阅读全文
posted @ 2018-01-11 11:52
淼淼之森
阅读(2357)
评论(0)
推荐(3)
摘要：
文中的所有操作都是在之前的文章spark集群的搭建基础上建立的，重复操作已经简写； 之前的配置中使用了master01、slave01、slave02、slave03； 本篇文章还要添加master02和CloudDeskTop两个节点，并配置好运行环境； 一、流程： 1、在搭建高可用集群之前需要先 阅读全文
posted @ 2018-01-10 09:04
淼淼之森
阅读(4240)
评论(0)
推荐(1)
摘要：
写此篇文章之前，已经搭建好spark集群并测试成功； spark集群搭建文章链接：http://www.cnblogs.com/mmzs/p/8193707.html 一、启动环境 由于每次都要启动，比较麻烦，所以博主写了个简单的启动脚本：第一个在root用户下，第二个在hadoop用户下执行； # 阅读全文
posted @ 2018-01-09 08:36
淼淼之森
阅读(13596)
评论(4)
推荐(4)
摘要：
文中的所有操作都是在之前的文章scala的安装及使用文章基础上建立的，重复操作已经简写； 配置中使用了master01、slave01、slave02、slave03； 一、虚拟机中操作(启动网卡)sh /install/initNetwork.shifup eth0 二、基础配置（主机名、IP配置 阅读全文
posted @ 2018-01-08 08:30
淼淼之森
阅读(3520)
评论(0)
推荐(1)
摘要：
前提你的集群机器已经安装好jdk1.7.0_79、hadoop-2.7.3； 配置中使用了master01、slave01、slave02、slave03； 文中的所有操作都是在之前的文章http://www.cnblogs.com/mmzs/p/8031129.html基础上建立的，重复操作已经简 阅读全文
posted @ 2018-01-07 10:16
淼淼之森
阅读(1759)
评论(0)
推荐(0)
摘要：
一、权限管理linux系统中对文件权限的描述机制： u g od r w x r w x r - x （r读，w写，x执行）文件 所有者 所属组 其他人可以表示为二进制： 111 111 101也可以表示为十进制： 7 7 5 修改权限chmod u+rwx file 为file添加或取消所属用户的 阅读全文
posted @ 2018-01-06 15:05
淼淼之森
阅读(366)
评论(0)
推荐(0)
摘要：
设置免密码登陆：[root@Redis01 test]# cd /install/[root@Redis01 install]# rm -rf test/[root@Redis01 install]# lsinitNetwork.sh[root@Redis01 install]# ssh Redis 阅读全文
posted @ 2018-01-05 08:49
淼淼之森
阅读(2295)
评论(0)
推荐(0)
摘要：
[root@Redis01 ~]# cd /install/[root@Redis01 install]# mkdir -p test && cd test -s修改时间：[root@Redis01 test]# date2017年 11月 30日 星期四 21:55:03 CST[root@Red 阅读全文
posted @ 2018-01-04 08:59
淼淼之森
阅读(1918)
评论(0)
推荐(1)
摘要：
配置JDK环境：JAVA_HOME:D:\software\JDK1.7Path:%JAVA_HOME%\bin;%JAVA_HOME%\lib; ls（查看当前目录下的文件及文件夹）sh initNetwork.sh（执行初始化网卡的脚本）ifup eth0 （启动网卡）ifconfig -a（1 阅读全文
posted @ 2018-01-03 17:19
淼淼之森
阅读(2721)
评论(0)
推荐(0)
摘要：
Linux之定时任务Crond使用 一、用法 crond服务是linux系统自带的服务，是不需要手动安装的； crond服务是一种守护进程； Linux中的用户使用contab命令来配置corn任务； 二、为特定用户添加定时任务 1、为root用户添加 写一个脚本： 为该脚本添加所有用户可执行的权限 阅读全文
posted @ 2018-01-02 18:21
淼淼之森
阅读(2181)
评论(0)
推荐(0)
摘要：
简介： sqoop是一款用于hadoop和关系型数据库之间数据导入导出的工具。你可以通过sqoop把数据从数据库（比如mysql,oracle）导入到hdfs中；也可以把数据从hdfs中导出到关系型数据库中。通过将sqoop的操作命令转化为Hadoop的MapReduce作业进行导入导出，(通常只涉 阅读全文
posted @ 2018-01-01 20:31
淼淼之森
阅读(8306)
评论(0)
推荐(6)
摘要：
测试准备 【首先同步时间：】 【slave各节点启动zookeeper集群：】 【master01启动HDFS集群：】 【master01启动HBase：】 【master02上启动HBase:】 如有节点启动出现故障：单独启动master：cd /software/hbase-1.2.6/bin 阅读全文
posted @ 2017-12-31 10:23
淼淼之森
阅读(616)
评论(0)
推荐(0)
摘要：
测试准备 【首先同步时间：】 【slave各节点启动zookeeper集群：】 【master01启动HDFS集群：】 【master01启动HBase：】 【master02上启动HBase:】 如有节点启动出现故障：单独启动master：cd /software/hbase-1.2.6/bin 阅读全文
posted @ 2017-12-30 15:12
淼淼之森
阅读(985)
评论(0)
推荐(0)
摘要：
[root@CloudDeskTop ~]# su -l hadoop[hadoop@CloudDeskTop ~]$ cd /software/hbase-1.2.6/bin/ [hadoop@CloudDeskTop bin]$ type hbasehbase is /software/hbas 阅读全文
posted @ 2017-12-29 10:03
淼淼之森
阅读(3236)
评论(0)
推荐(2)
摘要：
此文是基于上一篇文章：Hive默认数据库修改配置 （HBase先在集群master01、master02、slave01、slave02、slave03环境配置） 一、安装包初始安装 上传hbase-1.2.6-bin.tar.gz到/install目录； 解压安装到/software目录： 配置运 阅读全文
posted @ 2017-12-28 11:00
淼淼之森
阅读(436)
评论(0)
推荐(0)
摘要：
HBase简介 1、HBase是一个万亿行，百万列大表(Big Table)，数据存放在hdfs集群中； 写操作使用MapReduce处理，将（增删改）处理结果放入HBase中，读就直接读HBase； HBase的并发量在1000左右，常用的关系型数据库MySql的并发量在300~500之间，之所以 阅读全文
posted @ 2017-12-27 15:25
淼淼之森
阅读(1603)
评论(0)
推荐(0)
浙公网安备 33010602011771号