摘要: Scala语言可以安装在任何类UNIX或Windows系统。要安装Scala,必须先安装Java1.5或更高版本安装在计算机上。 Windows上安装Scala: 步骤(1):JAVA设置: 首先,必须设置JAVA_HOME环境变量和将JDK的bin目录添加到PATH变量。要验证是否可以工作,在命令 阅读全文
posted @ 2017-03-10 00:18 少年努力吧 阅读(263) 评论(0) 推荐(0)
摘要: Nginx是什么 代理服务器:一般是指局域网内部的机器通过代理服务器发送请求到互联网上的服务器,代理服务器一般作用在客户端。应用比如:GoAgent,FQ神器. 一个完整的代理请求过程为:客户端首先与代理服务器创建连接,接着根据代理服务器所使用的代理协议,请求对目标服务器创建连接、或者获得目标服务器 阅读全文
posted @ 2017-03-10 00:17 少年努力吧 阅读(257) 评论(0) 推荐(0)
摘要: Shuffle的本意是洗牌、混乱的意思,类似于java中的Collections.shuffle(List)方法,它会随机地打乱参数list里的元素顺序。MapReduce中的Shuffle过程。所谓Shuffle过程可以大致的理解成:怎样把map task的输出结果有效地传送到reduce输入端。 阅读全文
posted @ 2017-03-10 00:16 少年努力吧 阅读(1180) 评论(0) 推荐(0)
摘要: 1、HTML静态化其实大家都知道,效率最高、消耗最小的就是纯静态化的html页面,所以我们尽可能使我们的网站上的页面采用静态页面来实现,这个最简单的方法其实也是最有效的方法。但是对于大量内容并且频繁更新的网站,我们无法全部手动去挨个实现,于是出现了我们常见的信息发布系统CMS,像我们常访问的各个门户 阅读全文
posted @ 2017-03-10 00:16 少年努力吧 阅读(1834) 评论(0) 推荐(0)
摘要: HBase是Hadoop的数据库,能够对大数据提供随机、实时读写访问。他是开源的,分布式的,多版本的,面向列的,存储模型。 在讲解的时候我首先给大家讲解一下HBase的整体结构,如下图: HBase Master是服务器负责管理所有的HRegion服务器,HBase Master并不存储HBase服 阅读全文
posted @ 2017-03-10 00:10 少年努力吧 阅读(3944) 评论(0) 推荐(0)
摘要: 1、通过Java客户端连接Hbase,其中hbase通过zookeeper去管理,需要注意的是客户端端口。 通过在浏览器端输入地址查看:http://192.168.3.206:60010/master-status 可以看到端口与地址。 2、注意在win环境下,需要在 C:\Windows\Sys 阅读全文
posted @ 2017-03-10 00:09 少年努力吧 阅读(10532) 评论(0) 推荐(0)
摘要: 那么ZK Server最基础的东西是什么呢?我想应该是Paxos了。所以本文会介绍Paxos以及它在ZK Server中对应的实现。先说Paxos,它是一个基于消息传递的一致性算法,Leslie Lamport在1990年提出,近几年被广泛应用于分布式计算中,Google的Chubby,Apache 阅读全文
posted @ 2017-03-10 00:07 少年努力吧 阅读(1956) 评论(0) 推荐(0)
摘要: Redis是一个开源的Key-Value存储引擎,它支持string、hash、list、set和sorted set等多种值类型。由于其卓越的性能表现、丰富的数据类型及稳定性,广泛用于各种需要k/v存储的场景。甚至在一些分布式缓存系统中,也用它作为底层存储引擎。本文对redis最常用的数据类型进行 阅读全文
posted @ 2017-03-10 00:06 少年努力吧 阅读(4686) 评论(0) 推荐(0)
摘要: /** * Licensed to the Apache Software Foundation (ASF) under one * or more contributor license agreements. See the NOTICE file * distributed with this 阅读全文
posted @ 2017-03-10 00:03 少年努力吧 阅读(432) 评论(0) 推荐(0)
摘要: 经典版的MapReduce 所谓的经典版本的MapReduce框架,也是Hadoop第一版成熟的商用框架,简单易用是它的特点,来看一幅图架构图: 上面的这幅图我们暂且可以称谓Hadoop的V1.0版本,思路很清晰,各个Client提交Job给一个统一的Job Tracker,然后Job Tracke 阅读全文
posted @ 2017-03-10 00:02 少年努力吧 阅读(329) 评论(0) 推荐(0)
摘要: 以Windows系统中IP地址设置界面为参考(如图1), IP地址, 子网掩码, 默认网关 和 DNS服务器, 这些都是什么意思呢? 学习IP地址的相关知识时还会遇到网络地址,广播地址,子网等概念,这些又是什么意思呢 ? 一 IP地址 概述 计算机要实现网络通信,就必须要有一个用于快速定位的网络地址 阅读全文
posted @ 2017-03-10 00:01 少年努力吧 阅读(1877) 评论(0) 推荐(0)
摘要: Linux系统基本网络配置之ifconfig命令 一、Linux系统的网络配置基本包括:网络IP的配置、网关路由的配置、主机DNS的配置、主机名的配置等,本篇注重介绍网络IP的配置。 二、Linux系统的网络地址配置分为两种方式: 暂时的网络配置:利用ifconfig等命令配置的网络信息,会立即生效 阅读全文
posted @ 2017-03-10 00:00 少年努力吧 阅读(3177) 评论(0) 推荐(0)