随笔分类 -  Linux

摘要:date -d <字符串>:显示当前字符串中所指的时间和日期 date +%s:从 1970 年 1 月 1 日 00:00:00 UTC 到目前为止的秒数 下面例子就是从 1970 年 1 月 1 日 00:00:00 UTC 到目前20160101(Fri Jan 1 00:00:00 CST 阅读全文
posted @ 2016-09-28 15:51 Xu Feng 阅读(347) 评论(0) 推荐(0)
摘要:今天学习一个bash脚本,看到有一条:bin=`dirname "$0"` (dirname filename是输出该文件所在的目录,$0是该bash文件的文件名,在bash中一般使用cd `dirname $0`进入该脚本所在的目录中) 我尝试着cat $bin 输出是:. 然后我将反引号``去掉 阅读全文
posted @ 2016-09-28 00:51 Xu Feng 阅读(37994) 评论(0) 推荐(2)
摘要:最近在做实验,实验需要进行分区域计算,网上查了资料后发现Yarn Node Labels + Capacity-Scheduler可以实现我的需求 但是当任务提交到capacity-scheduler调度器的default队列时,任务卡在ACCEPTED阶段。 网上看了很多发现没有这方面的信息,最后 阅读全文
posted @ 2016-09-13 19:51 Xu Feng 阅读(9297) 评论(0) 推荐(0)
摘要:hive搭建共分为三种模式:1、embedded,2、local,3、remote server 在这里,主要是配置第3种模式:remote server模式,如下图所示: 我的环境共三台虚拟机:Host0,Host2,Host3 在remote server模式中,Host0:Hive-serve 阅读全文
posted @ 2016-09-11 23:10 Xu Feng 阅读(2249) 评论(0) 推荐(0)
摘要:环境:三台虚拟机Host0,Host1,Host2 Host0:192.168.10.2 Host1: 192.168.10.3 Host2: 192.168.10.4 在三台虚拟机上配置zookeeper,具体配置详见CentOS中配置CDH版本的ZooKeeper 下载kafka:http:// 阅读全文
posted @ 2016-09-05 14:06 Xu Feng 阅读(2495) 评论(0) 推荐(1)
摘要:三台CentOS:Host0,Host1,Host2 在三台中分别安装zookeeper-server 修改zookeeper的配置文件(/etc/zookeeper/conf/zoo.cfg) 因为zookeeper集群共有3个节点,所以在配置文件中添加server.0,server.1,serv 阅读全文
posted @ 2016-09-03 13:01 Xu Feng 阅读(4534) 评论(0) 推荐(0)
摘要:系统: CentOS release 6.6 (Final) Nexus:nexus-2.8.1-bundle.tar.gz,下载地址:https://sonatype-download.global.ssl.fastly.net/nexus/oss/nexus-2.8.1-bundle.tar.g 阅读全文
posted @ 2016-06-16 22:05 Xu Feng 阅读(864) 评论(0) 推荐(0)
摘要:环境:CentOS 6.4 1、安装相关软件 yum groupinstall "Desktop" (已安装桌面的就可以缺略这条命令) yum install xrdp yum install tigervnc-server 2、启动xrdp服务 service xrdp restart 3、配置i 阅读全文
posted @ 2016-03-10 00:39 Xu Feng 阅读(992) 评论(0) 推荐(0)
摘要:环境:CentOS 6.4 1、安装tigervnc-server及相关软件 首先检查系统中是否安装tigervnc-server安装包 rpm -qa tigervnc-server 如果没有就直接安装 yum install tigervnc-server* 2、修改vncserver的配置文件 阅读全文
posted @ 2016-03-10 00:32 Xu Feng 阅读(562) 评论(0) 推荐(0)
摘要:启动指令:service iptables start 重启指令:service iptables restart 关闭指令:service iptables stop规则相关配置:/etc/sysconfig/iptablesvim /etc/sysconfig/iptables注意:修改完ipt... 阅读全文
posted @ 2015-12-21 17:24 Xu Feng 阅读(170) 评论(0) 推荐(0)
摘要:1.查看当前硬盘使用状况:[test@master Desktop]$ df -hFilesystem Size Used Avail Use% Mounted on/dev/sda2 13G 12G 481M 97% /tmpfs ... 阅读全文
posted @ 2015-04-14 10:40 Xu Feng 阅读(3118) 评论(0) 推荐(0)
摘要:IPTABLES传输数据包的过程大概过程如图所示:1. 数据包进入网卡时,首先进入PREROUTING链,linux内核会判断数据包的目的IP是否为本地主机2. 如果数据包的目的IP是本地主机,那么数据包会沿图向下移动,进入INPUT链中,数据包进入INPUT链中,本地主机的所有线程都会收到它,本地... 阅读全文
posted @ 2014-07-28 17:14 Xu Feng 阅读(1768) 评论(0) 推荐(0)
摘要:使用Squid配置透明代理环境:CentOS 6.4 + squid-3.1.10-20.el6_5.3.x86_641.检查squid是否默认安装,没有安装先安装 rpm -qa squid假如查找不到,就安装squid: yum install squid2.配置虚拟机的网络,一个网卡是内网,另... 阅读全文
posted @ 2014-07-21 17:51 Xu Feng 阅读(8891) 评论(0) 推荐(1)
摘要:禁止其他主机对该特定主机进行访问和远程连接控制,所以只开放特定端口只控制INPUT链就可达到控制其他主机对该主机的访问。1.首先关闭INPUT链 iptables -P INPUT DROP 使用命令iptables -L 来查看iptables的状态及设置 这样设置好后,对应iptable... 阅读全文
posted @ 2014-07-21 17:49 Xu Feng 阅读(5596) 评论(0) 推荐(0)
摘要:1、系统环境变量Fedora: yum install libacl-devel libblkid-devel gnutls-devel \ readline-devel python-devel gdb pkgconfig libattr-devel \ krb5-workstationD... 阅读全文
posted @ 2014-05-22 10:49 Xu Feng 阅读(1849) 评论(0) 推荐(0)
摘要:该网站的各种linux服务的配置都是基于CentOS系统的基本上各种linux服务都有了http://www.server-world.info/en/ 阅读全文
posted @ 2014-03-05 14:25 Xu Feng 阅读(322) 评论(0) 推荐(0)
摘要:我是在CentOS系统下。配置好NFS服务后,本机测试挂在通过,但是在其他客户端上会出现挂在失败,错误信息如下:mount: mount to NFS server '192.168.10.20' failed: timed out (retrying).mount: mount to NFS se... 阅读全文
posted @ 2014-02-28 11:17 Xu Feng 阅读(3677) 评论(1) 推荐(1)
摘要:修改linux系统的默认语言: 1、全局修改: 所有用户都是同一种统一的语言设置 修改/etc/sysconfig/i18n文件 vi /etc/sysconfig/i18n 如果你要修改成中文,就改成LANG="zh_CN.UTF-8" 如果你要修改成英文,就改成LANG="en_US.UTF-8 阅读全文
posted @ 2014-01-09 16:25 Xu Feng 阅读(3278) 评论(0) 推荐(0)
摘要:让VIM可以在你写程序的时候自动缩进,并用4个空格代替TAB键。编辑 ~/.vimrc 保存这四行:“set smartindent”, “set tabstop=4”, “set shiftwidth=4”, “set expandtab” 阅读全文
posted @ 2013-12-25 11:12 Xu Feng 阅读(775) 评论(0) 推荐(0)
摘要:FIO是测试IOPS的非常好的工具,用来对硬件进行压力测试和验证,支持13种不同的I/O引擎,包括:sync,mmap, libaio, posixaio, SG v3, splice, null, network, syslet, guasi, solarisaio 等等。1、FIO的安装大家可以... 阅读全文
posted @ 2013-12-23 21:02 Xu Feng 阅读(15299) 评论(0) 推荐(2)