随笔档案「2017年6月」 - BurningMyself

Linux 基本命令

摘要：命令怎么用shutdown --helpshutdown --?man shutdown 这三种方法都可以shutdown 用错了他会有提示哪一个命令不知道怎么用了，问问男人就可以了man 就是... 阅读全文

posted @ 2017-06-30 22:12 BurningMyself 阅读(101) 评论(0) 推荐(0)

Junit 单元测试、BeanUtils、Properties类

摘要：一、 Junit单元测试1.1. Junit单元测试框架的基本使用一、搭建环境：导入junit.jar包（junit4）二、写测试类：0，一般一个类对应一个测试类。1，测试类与被测试类最好是放到同一个包中（可... 阅读全文

posted @ 2017-06-29 16:42 BurningMyself 阅读(130) 评论(0) 推荐(0)

Java xml 操作(Dom4J修改xml + xPath技术 + SAX解析 + XML约束)

摘要：1 XML基础1）XML的作用1.1 作为软件配置文件1.2 作为小型的“数据库”2）XML语法（由w3c组织规定的）标签：标签名不能以数字开头，中间不能有空格，区分大小写。有且仅有一个根标签。属性：可有多个... 阅读全文

posted @ 2017-06-24 11:55 BurningMyself 阅读(100) 评论(0) 推荐(0)

《将博客搬至CSDN》

摘要：《将博客搬至CSDN》阅读全文

posted @ 2017-06-23 20:30 BurningMyself 阅读(56) 评论(0) 推荐(0)

HDFS详解

摘要：******HDFS基本概念篇******1. HDFS前言l 设计思想分而治之：将大文件、大批量文件，分布式存放在大量服务器上，以便于采取分而治之的方式对海量数据进行运算分析； l 在大数据系统中作用：为各类分... 阅读全文

posted @ 2017-06-23 19:07 BurningMyself 阅读(150) 评论(0) 推荐(0)

操作Hadoop集群

摘要：操作Hadoop集群所有必要的配置完成后，将文件分发到所有机器上的HADOOP_CONF_DIR目录。这应该是所有机器上相同的目录。一般来说，建议HDFS和YARN作为单独的用户运行。在大多数安装中，HDFS进程... 阅读全文

posted @ 2017-06-20 21:11 BurningMyself 阅读(87) 评论(0) 推荐(0)

Git 命令操作

摘要：常用 Git 命令清单我每天使用 Git ，但是很多命令记不住。一般来说，日常使用只要记住下图6个命令，就可以了。但是熟练使用，恐怕要记住60～100个命令。下面是我整理的常用 Git 命令清单。几个专用名词的译... 阅读全文

posted @ 2017-06-19 18:50 BurningMyself 阅读(114) 评论(0) 推荐(0)

vim常用快捷键

摘要：1、vim ~/.vimrc 进入配置文件如果不知道vimrc文件在哪，可使用 :scriptnames 来查看set nu #行号set tabstop=4 #一个tab为4个空格长度set ai?... 阅读全文

posted @ 2017-06-19 18:49 BurningMyself 阅读(94) 评论(0) 推荐(0)

hadoop 3.0.0 alpha3 安装、配置

摘要：1. 官网下载 wget http://mirror.bit.edu.cn/apache/hadoop/common /hadoop-3.0.0-alpha3/hadoop-3.0.0-alpha3.tar.... 阅读全文

posted @ 2017-06-18 01:43 BurningMyself 阅读(134) 评论(0) 推荐(0)

hadoop 3.0.0 alpha3 配置

摘要：1. 官网下载 wget http://mirror.bit.edu.cn/apache/hadoop/common /hadoop-3.0.0-alpha3/hadoop-3.0.0-alpha3.tar.gz ..注意下载二进制（省时间） 1解压 tar -zxvf hadoop-3.0.0-a 阅读全文

posted @ 2017-06-18 01:41 BurningMyself 阅读(1927) 评论(0) 推荐(0)

集群使用初步

摘要：5 集群使用初步5.1 HDFS使用1、查看集群状态命令： hdfs dfsadmin –report 可以看出，集群共有3个datanode可用也可打开web控制台查看HDFS集群信息，在浏览器打开h... 阅读全文

posted @ 2017-06-17 14:09 BurningMyself 阅读(184) 评论(0) 推荐(0)

集群搭建

摘要：4. 集群搭建4.1 HADOOP集群搭建4.1.1集群简介HADOOP集群具体来说包含两个集群：HDFS集群和YARN集群，两者逻辑上分离，但物理上常在一起HDFS集群：负责海量数据的存储，集群中的角色主要有 ... 阅读全文

posted @ 2017-06-17 14:06 BurningMyself 阅读(114) 评论(0) 推荐(0)

离线数据分析流程介绍

摘要：3. 离线数据分析流程介绍注：本环节主要感受数据分析系统的宏观概念及处理流程，初步理解hadoop等框架在其中的应用环节，不用过于关注代码细节一个应用广泛的数据分析系统：“web日志数据挖掘” 3.1 需求分... 阅读全文

posted @ 2017-06-17 14:01 BurningMyself 阅读(159) 评论(0) 推荐(0)

分布式系统概述

摘要：2 分布式系统概述注：由于大数据技术领域的各类技术框架基本上都是分布式系统，因此，理解hadoop、storm、spark等技术框架，都需要具备基本的分布式系统概念 2.1 分布式软件系统(Distributed... 阅读全文

posted @ 2017-06-17 13:56 BurningMyself 阅读(149) 评论(0) 推荐(0)

HADOOP背景介绍

摘要：1. HADOOP背景介绍1.1 什么是HADOOP1. HADOOP是apache旗下的一套开源软件平台2. HADOOP提供的功能：利用服务器集群，根据用户的自定义业务逻辑，对海量数据进行分布式处理3. HA... 阅读全文

posted @ 2017-06-17 13:55 BurningMyself 阅读(262) 评论(0) 推荐(0)

WebPack 简单使用

摘要：WebPack是什么一个打包工具一个模块加载工具各种资源都可以当成模块来处理网站 http://webpack.github.io/如今，越来越多的JavaScript代码被使用在页面上，我们添加很多的内容在浏览... 阅读全文

posted @ 2017-06-16 00:24 BurningMyself 阅读(74) 评论(0) 推荐(0)

PHP 设置调试工具XDebug PHPStorm IDE

摘要：先下载PHP扩展Xdebug https://xdebug.org, 可以复制自己的phpinfo粘贴到https://xdebug.org/wizard.php中, 会生成需要下载的版本, php.ini的设置... 阅读全文

posted @ 2017-06-13 18:47 BurningMyself 阅读(84) 评论(0) 推荐(0)

Linux下安装MongoDB

摘要：查看MongoDB的最新版官方下载地址：https://www.mongodb.com/download-center?jmp=nav#community使用wget命令下载安装包 wget https://f... 阅读全文

posted @ 2017-06-10 20:19 BurningMyself 阅读(98) 评论(0) 推荐(0)