摘要：
根据官网介绍主要有两种监控方式，1：使用ssh建立远程连接，然后使用"echo stat | nc ip port"命令返回结果。开源项目代表taokeeper。2：使用JMX监控，文档[http://zookeeper.apache.org/doc/r3.4.6/zookeeperJMX.html 阅读全文
posted @ 2016-09-13 15:27
大数据从业者FelixZh
阅读(3290)
评论(0)
推荐(0)
摘要：
出处：http://www.cnblogs.com/jlily/ 1. 准备CentOS安装镜像文件 官网下载地址：http://www.centos.org/download/ 官方有三个版本：DVD、Everything和Minimal， 而我安装的是mini版，CentOS-7.0-1406- 阅读全文
posted @ 2016-09-11 14:01
大数据从业者FelixZh
阅读(1125)
评论(0)
推荐(0)
摘要：
下载地址: http://pypi.python.org/pypi/requests/只有tart.gz包 解压后，进入目录，安装命令: 会出现：ImportError: No module named setuptools 原因分析： 这是因为当前系统环境下Python没有安装setuptools 阅读全文
posted @ 2016-09-10 16:43
大数据从业者FelixZh
阅读(946)
评论(0)
推荐(0)
摘要：
具体需要升级成什么版本自行下载https://gcc.gnu.org/ 本文升级为4.8.5 1.下载编译所需依赖库 cd gcc-4.8.5 ./contrib/download_prerequisites cd .. 2.建立编译输出目录 mkdir gcc-build-4.8.0 3.进入此目 阅读全文
posted @ 2016-08-31 08:49
大数据从业者FelixZh
阅读(4061)
评论(0)
推荐(2)
摘要：
1.准备源文件包 [felix@MyTerminal Downloads]$ mv node-6.5.0 node [felix@MyTerminal Downloads]$ ls node node-v4.5.0-linux-x86.tar.xz[felix@MyTerminal Download 阅读全文
posted @ 2016-08-30 15:54
大数据从业者FelixZh
阅读(11618)
评论(0)
推荐(0)
摘要：
开发 Node.js 实现的 HTTP 应用时会发现，无论你修改了代码的哪一部份，都必须终止Node.js 再重新运行才会奏效。 这是因为 Node.js 只在第一次引用到某部份时才会去解析脚本文件，以后都会直接访问内存，避免重复载入。这种设计虽然 有利于提高性能，却不利于开发调试，因为开发过程中总 阅读全文
posted @ 2016-08-30 13:52
大数据从业者FelixZh
阅读(1460)
评论(0)
推荐(0)
摘要：
XZ压缩最新压缩率之王 xz这个压缩可能很多都很陌生，不过您可知道xz是绝大数linux默认就带的一个压缩工具。 之前xz使用一直很少，所以几乎没有什么提起。 我是在下载phpmyadmin的时候看到这种压缩格式的，phpmyadmin压缩包xz格式的居然比7z还要小，这引起我的兴趣。 最新一段时间 阅读全文
posted @ 2016-08-26 15:47
大数据从业者FelixZh
阅读(715)
评论(0)
推荐(0)
摘要：
01.from numpy import array 02.from random import random 03.from math import sin, sqrt 04. 05.iter_max = 10000 06.pop_size = 100 07.dimensions = 2 08.c1 = 2 09.c2 = 2 10.err_crit = 0.00001 11. ... 阅读全文
posted @ 2016-05-30 00:10
大数据从业者FelixZh
阅读(4838)
评论(0)
推荐(1)
摘要：
用python也差不多一年多了，python应用最多的场景还是web快速开发、爬虫、自动化运维：写过简单网站、写过自动发帖脚本、写过收发邮件脚本、写过简单验证码识别脚本。 爬虫在开发过程中也有很多复用的过程，这里总结一下，以后也能省些事情。 1、基本抓取网页 get方法 post方法 2、使用代理I 阅读全文
posted @ 2016-04-27 18:10
大数据从业者FelixZh
阅读(527)
评论(0)
推荐(0)
摘要：
HTTP（HyperText Transfer Protocol）即超文本传输协议，所有的WWW文件都必须遵守这个标准。设计HTTP最初的目的是为了提供一种发布和接收HTML页面的方法。HTTP协议采用了请求/响应模型，浏览器或其他客户端发出请求，服务器给与响应。HTTP header 大体分为Re 阅读全文
posted @ 2016-04-27 18:05
大数据从业者FelixZh
阅读(523)
评论(0)
推荐(0)
摘要：
下面是十个Python中很有用的贴士和技巧。其中一些是初学这门语言常常会犯的错误。 注意：假设我们都用的是Python 3 下面是十个Python中很有用的贴士和技巧。其中一些是初学这门语言常常会犯的错误。 注意：假设我们都用的是Python 3 1. 列表推导式 你有一个list：bag = [1 阅读全文
posted @ 2016-04-27 18:02
大数据从业者FelixZh
阅读(361)
评论(0)
推荐(0)
摘要：
之前如果建立 ssh 连接,只要將公鑰複製到 ~/.ssh/authorized_keys 就可以利用金鑰登入而不需要建立密碼.現在的 ssh 使用同樣的方法會出現錯誤訊息 Agent admitted failure to sign using the key 解決方式 使用 ssh-add 指令 阅读全文
posted @ 2016-04-08 14:09
大数据从业者FelixZh
阅读(330)
评论(0)
推荐(0)
摘要：
http://scikit-learn.org/stable/install.html 安装python-dev 安装这个包，以后安装各种python扩展包，可以省很多事情。 sudo apt-get install python-dev 使用apt-get 安装 只需要下面的几个命令即可，亲测可用 阅读全文
posted @ 2016-03-25 15:21
大数据从业者FelixZh
阅读(506)
评论(0)
推荐(0)
摘要：
软件环境介绍操作系统：Ubuntu server 64bit 14.04.1Docker 版本 1.6.2数据库：Mariadb 10.10 （Mariadb 是 MySQL 之父在 MySQL 被 Oracle 收购之后创建的分支，性能上优于 MySQL 开源版本）第一步 安装 Docker对于 阅读全文
posted @ 2016-02-17 10:25
大数据从业者FelixZh
阅读(4512)
评论(0)
推荐(0)
摘要：
在CentOS 6上搭建私有的Docker Registry v2Registry概念 ：Registry是一个无状态的， 高可扩展的服务器端应用程序， 用于存储和分发Docker Image。 依赖安装 1. 安装Docker 要使用Docker Registry， 当然首先要安装Docker。 阅读全文
posted @ 2016-02-17 10:23
大数据从业者FelixZh
阅读(1689)
评论(0)
推荐(0)
摘要：
本文适用于CentOS 6.4, CentOS 6.5，估计也适用于其他Linux发行版。 1. 准备工作 确认内核及版本信息 安装软件 编译安装新内核，依赖于开发环境和开发库 如果当初安装系统是选择了Software workstation，上面的安装包几乎都已包含。 2. 编译内核 获取并解压内 阅读全文
posted @ 2016-01-23 15:19
大数据从业者FelixZh
阅读(3177)
评论(0)
推荐(0)
摘要：
1.VMware虚拟机组网概述 整个结构： 需要确定的内容： 1) 虚拟机连接到哪个VMnet(交换机)？ 2) VMnet(交换机)的组网模式？ 首先，讲一下VMware的界面内容 安装好VMware虚拟机后，启动后，点击编辑，找到虚拟网络编辑器 这里可以实现的操作： a.添加及删除VMnet(交 阅读全文
posted @ 2016-01-22 19:02
大数据从业者FelixZh
阅读(1368)
评论(0)
推荐(0)
摘要：
Docekr 对内核由要求，3.10以上 Centos 6.5内核达不到要求 需要升级 具体如下： 阅读全文
posted @ 2016-01-22 15:09
大数据从业者FelixZh
阅读(476)
评论(0)
推荐(0)
摘要：
Centos 6.5 x64 jdk 1.7 scala 2.10 maven 3.3.3 cd spark-1.6 export MAVEN_OPTS="-Xmx2g -XX:MaxPermSize=512M -XX:ReservedCodeCacheSize=512m" mvn -Dhadoop 阅读全文
posted @ 2016-01-10 19:13
大数据从业者FelixZh
阅读(775)
评论(0)
推荐(0)
摘要：
30. 用密码保护 GRUB用密码保护你的 boot 引导程序这样你就可以在启动时获得额外的安全保障。同时你也可以在实物层面获得保护。通过在引导时给 GRUB 加锁防止任何无授权访问来保护你的服务器。首先备份两个文件，这样如果有任何错误出现，你可以有回滚的选择。备份 ‘/etc/grub2/grub... 阅读全文
posted @ 2016-01-10 15:22
大数据从业者FelixZh
阅读(458)
评论(0)
推荐(0)
摘要：
25. 安装 Linux Malware Detect (LMD)Linux Malware Detect (LMD) 是 GNU GPLv2 协议下发布的开源 Linux 恶意程序扫描器，它是特别为面临威胁的主机环境所设计的。LMD 完整的安装、配置以及使用方法可以查看：安装 LMD 并和 Cla... 阅读全文
posted @ 2016-01-10 15:18
大数据从业者FelixZh
阅读(574)
评论(0)
推荐(0)
摘要：
17. 安装 WebminWebmin 是基于 Web 的 Linux 配置工具。它像一个中央系统，用于配置各种系统设置，比如用户、磁盘分配、服务以及 HTTP 服务器、Apache、MySQL 等的配置。# wget http://prdownloads.sourceforge.net/webad... 阅读全文
posted @ 2016-01-10 15:17
大数据从业者FelixZh
阅读(272)
评论(0)
推荐(0)
摘要：
12. 安装 Apache TomcatTomcat 是由 Apache 设计的用来运行 Java HTTP web 服务器的 servlet 容器。按照下面的方法安装 tomcat，但需要指出的是安装 tomcat 之前必须先安装 Java。# yum install tomcat安装 Apach... 阅读全文
posted @ 2016-01-10 15:14
大数据从业者FelixZh
阅读(363)
评论(0)
推荐(0)
摘要：
7. 安装 PHPPHP 是用于 web 基础服务的服务器端脚本语言。它也经常被用作通用编程语言。在最小化安装的 CentOS 中安装 PHP：# yum install php安装完 php 之后，确认重启 Apache 服务以便在 Web 浏览器中渲染 PHP。# systemctl resta... 阅读全文
posted @ 2016-01-10 15:13
大数据从业者FelixZh
阅读(382)
评论(0)
推荐(0)
摘要：
CentOS 是一个工业标准的 Linux 发行版，是红帽企业版 Linux 的衍生版本。你安装完后马上就可以使用，但是为了更好地使用你的系统，你需要进行一些升级、安装新的软件包、配置特定服务和应用程序等操作。这篇文章介绍了 “安装完 RHEL/CentOS 7 后需要做的 30 件事情”。阅读帖子... 阅读全文
posted @ 2016-01-10 15:11
大数据从业者FelixZh
阅读(436)
评论(0)
推荐(0)
摘要：
linux系统如果是学习可以选用redhat或centos，特别是centos在企业中用得最多，当然还会有其它版本的，但学习者还是以这2个版本学习就行，因为这两个版本都是兄弟，没区别的，有空可以再研究一下SUSE，有些公司也喜欢用，例如我公司 。。。。。工具如下：1、linux系统基础，这个不用说了... 阅读全文
posted @ 2016-01-10 15:01
大数据从业者FelixZh
阅读(386)
评论(0)
推荐(0)
摘要：
当下，Spark已经在国内得到了广泛的认可和支持：2014年，Spark Summit China在北京召开，场面火爆；同年，Spark Meetup在北京、上海、深圳和杭州四个城市举办，其中仅北京就成功举办了5次，内容更涵盖Spark Core、Spark Streaming、Spark MLli... 阅读全文
posted @ 2016-01-10 13:22
大数据从业者FelixZh
阅读(560)
评论(0)
推荐(0)
摘要：
1.从哪些地方可以识别hadoop是32位还是64位？2.hadoop本地库在什么位置？hadoop在安装的时候，我们需要知道hadoop版本是32位还是64位。hadoop官网本来提供的都是32位，因为我们大部分都是64位，所以不得不编译。后来官网从hadoop2.5版本开始就提供了64位。为了防... 阅读全文
posted @ 2016-01-08 21:24
大数据从业者FelixZh
阅读(558)
评论(0)
推荐(0)
摘要：
问题导读：1、如何对Spark1.0.0源码编译？2、如何生成Spark1.0的部署包？3、如何获取包资源？Spark1.0.0的源码编译和部署包生成，其本质只有两种：Maven和SBT，只不过针对不同场景而已：Maven编译SBT编译IntelliJ IDEA编译（可以采用Maven或SBT插件编... 阅读全文
posted @ 2016-01-08 19:52
大数据从业者FelixZh
阅读(526)
评论(0)
推荐(0)
摘要：
【注】该系列文章以及使用到安装包/测试数据 可以在《倾情大奉送--Spark入门实战系列》获取1、编译SparkSpark可以通过SBT和Maven两种方式进行编译，再通过make-distribution.sh脚本生成部署包。SBT编译需要安装git工具，而Maven安装则需要maven工具，两种... 阅读全文
posted @ 2016-01-08 19:51
大数据从业者FelixZh
阅读(297)
评论(0)
推荐(0)
浙公网安备 33010602011771号