11 2016 档案

linux开启telnet服务
摘要：步骤： sudo apt-get install xinetd telnetd 安装成功后，系统会显示有相应得提示 sudo vim /etc/inetd.conf 并加入内容: telnet stream tcp nowait telnetd /usr/sbin/tcpd /usr/sbin/in 阅读全文
posted @ 2016-11-27 18:45 一人浅醉- 阅读(2735) 评论(0) 推荐(0)
linux防火墙
摘要：LInux原始的防火墙工具iptables由于过于繁琐,所以ubuntu系统默认提供了一个基于iptable之上的防火墙工具ufw。而UFW支持图形界面操作,只需在命令行运行ufw命令即能看到一系列的操作。接下来,就由专业运营香港服务器、美国服务器、韩国服务器等国外服务器的天下数据为大家介绍ubuntu系统防火墙的开启、关闭等常规操作命令。 启用ufwsudo ufw enablesudo ufw... 阅读全文
posted @ 2016-11-27 17:40 一人浅醉- 阅读(245) 评论(0) 推荐(0)
Spark集群搭建步骤
摘要：问题： 参考：Spark快速入门指南 – Spark安装与基础使用 阅读全文
posted @ 2016-11-27 01:27 一人浅醉- 阅读(179) 评论(0) 推荐(0)
Hadoop集群搭建步骤
摘要：实验性操作是在虚拟机里进行的，除了搭建hadoop本身的操作之外，遇到的其它问题总结如下： 1. 虚拟机挂载windows磁盘： 添加硬件，要保证该硬件此时没有被读写访问等，因为挂载后，该磁盘在宿主机上就不能用了。启动虚拟机linux，执行 fdisk –l 查看windows磁盘的分区，如/dev 阅读全文
posted @ 2016-11-27 01:26 一人浅醉- 阅读(2492) 评论(0) 推荐(0)
Linux上传与下载(sz-rz)
摘要：linux使用rz和sz命令上传和下载文件！ sz命令发送文件到本地： # sz filename rz命令本地上传文件到服务器： # rz 执行该命令后，在弹出框中选择要上传的文件即可。 说明：打开SecureCRT软件 -> Options -> session options -> X/Y/Z 阅读全文
posted @ 2016-11-21 17:29 一人浅醉- 阅读(1008) 评论(0) 推荐(0)
Spark文档
摘要：参考文档 阅读全文
posted @ 2016-11-19 20:15 一人浅醉- 阅读(153) 评论(0) 推荐(0)
Hadoop基本命令详解
摘要：调用文件系统(FS)Shell命令应使用bin/hadoop fs 的形式。所有的的FS shell命令使用URI路径作为参数。URI路径详解点击这里。 1、cat 说明：将路径指定文件的内容输出到stdout。用法：hadoop fs -cat URI [URI …]范例：hadoop fs -cat hdfs://host1:port1/file1 hdfs://host2:port2/fi... 阅读全文
posted @ 2016-11-17 19:26 一人浅醉- 阅读(2313) 评论(0) 推荐(0)
lzo压缩格式文件查看
摘要：使用lzop命令解压并查看 ：lzop -cd xxx.lzo |more 附压缩命令：lzop xxx.log （生成xxx.log.lzo） 其它参数： 需要在机器上安装lzop后才能使用命令，参考：http://cyibeike.blog.163.com/blog/static/2111257 阅读全文
posted @ 2016-11-17 16:26 一人浅醉- 阅读(9815) 评论(0) 推荐(0)
hadoop端口配置指南
摘要：获取默认配置 配置hadoop，主要是配置core-site.xml,hdfs-site.xml,mapred-site.xml三个配置文件，默认下来，这些配置文件都是空的，所以很难知道这些配置文件有哪些配置可以生效，上网找的配置可能因为各个hadoop版本不同，导致无法生效。浏览更多的配置，有两个方法:1.选择相应版本的hadoop,下载解压后，搜索*.xml,找到core-default.xm... 阅读全文
posted @ 2016-11-17 15:40 一人浅醉- 阅读(9937) 评论(0) 推荐(0)
SSH免密登录服务器
摘要： 阅读全文
posted @ 2016-11-16 16:43 一人浅醉- 阅读(192) 评论(0) 推荐(0)
安装Java Cer证书
摘要：skldfsdf Javaawtetwetwetwetwe testse Javaestestset 阅读全文
posted @ 2016-11-16 11:48 一人浅醉- 阅读(1077) 评论(1) 推荐(0)
atnodes命令+sort+uniq统计特征信息到结果文件
摘要：atnodes 'zgrep -oE "保单号重复" log.2016-10-23*.gz log.2016-10-24*.gz log.2016-10-25-*gz | grep -o -P 'DDBH\d+' | sort | uniq -i' machines[1-4] >> result.txt 阅读全文
posted @ 2016-11-10 10:28 一人浅醉- 阅读(823) 评论(0) 推荐(0)
curl命令PostJson
摘要：curl -H "Content-Type: application/json" -X POST --data '{"data":"1"}' http://127.0.0.1/ 阅读全文
posted @ 2016-11-09 21:16 一人浅醉- 阅读(24248) 评论(1) 推荐(2)
Vim快捷键大全
摘要：vi（vim）是上Linux非常常用的编辑器，很多Linux发行版都默认安装了vi(vim)。vi(vim)命令繁多但是如果使用灵活之后将会大大提高效率。vi是“visual interface”的缩写，vim是vi IMproved(增强版的vi)。在一般的系统管理维护中vi就够用，如果想使用代码加亮的话可以使用vim。 vi有3个模式：插入模式、命令模式、低行模式 1）插入模式：在此模式下... 阅读全文
posted @ 2016-11-09 14:06 一人浅醉- 阅读(1870) 评论(0) 推荐(0)
SublimeText快捷键
摘要：在我做了一次包含一些现场编码的演示后，一些观众问我是如何操作这么快。当然这里没有唯一的答案，答案是一堆简单的快捷键和大量的实践的组合。为了回应那些询问，我觉得有必要看看我每天想都不用想且使用的快捷键。 这里有一个15 16 个快捷键的精选列表(1个自定义快捷键)，以gif动画展示，我每天使用。享受吧! (译者注：原文所列快捷键均为OS X环境，为了方便Windows和Linux环境童鞋的学习，... 阅读全文
posted @ 2016-11-09 14:02 一人浅醉- 阅读(423) 评论(0) 推荐(0)
Spark Graphx编程指南
摘要：问题导读1.GraphX提供了几种方式从RDD或者磁盘上的顶点和边集合构造图?2.PageRank算法在图中发挥什么作用？3.三角形计数算法的作用是什么？Spark中文手册-编程指南Spark之一个快速的例子Spark之基本概念Spark之基本概念Spark之基本概念（2）Spark之基本概念（3）Spark-sql由入门到精通Spark-sql由入门到精通续spark GraphX编程指南（1）... 阅读全文
posted @ 2016-11-08 17:44 一人浅醉- 阅读(968) 评论(0) 推荐(0)
在多个文件中查找某个词出现的总次数
摘要：zgrep -oE '与已经有保单\(订单号:(.*)\)的保单号重复' /home/source.log.2016-10-23*.gz /home/source.log.2016-10-24*.gz /home/source.log.2016-10-25-*gz /home/source.log | sort | uniq -i 阅读全文
posted @ 2016-11-07 17:06 一人浅醉- 阅读(668) 评论(0) 推荐(0)
国内开源镜像站
摘要：搜狐开源镜像站：http://mirrors.sohu.com/ 网易开源镜像站：http://mirrors.163.com/开源中国：http://mirrors.oschina.net/首都在线科技股份有限公司：http://mirrors.yun-idc.com/阿里云开源镜像：http:/ 阅读全文
posted @ 2016-11-07 17:01 一人浅醉- 阅读(526) 评论(2) 推荐(0)