上一页 1 ··· 5 6 7 8 9 10 11 12 13 下一页

2015年9月25日

hadoop——Map/Reduce中combiner的使用

摘要: 一、作用1、combiner最基本是实现本地key的聚合,对map输出的key排序,value进行迭代。如下所示:map: (K1, V1) → list(K2, V2)combine: (K2, list(V2)) → list(K2, V2)reduce: (K2, list(V2)) → li... 阅读全文

posted @ 2015-09-25 14:29 月未央 阅读(3285) 评论(0) 推荐(0)

python字符串方法split的一道坑

摘要: 转自http://www.cnblogs.com/librasz/p/3232611.html初看这个方法还挺好用的,用来切割字符串真是的是非常方便,返回的字符串数组也非常容易处理。于是乎看了一眼就应用到我的程序当中去了。用来切割如下形式的字符串s = 'Jul 24 21:38:25 luozw ... 阅读全文

posted @ 2015-09-25 10:04 月未央 阅读(2903) 评论(0) 推荐(0)

python —— strip,split,join

摘要: strip函数原型声明:s为字符串,rm为要删除的字符序列s.strip(rm) 删除s字符串中开头、结尾处,位于rm删除序列的字符s.lstrip(rm) 删除s字符串中开头处,位于rm删除序列的字符s.rstrip(rm) 删除s字符串中结尾处,位于rm删除序列的字符注意:1. 当rm为空时,默... 阅读全文

posted @ 2015-09-25 09:59 月未央 阅读(705) 评论(0) 推荐(0)

2015年9月23日

使用getopts命令解析shell脚本的命令行选项

摘要: 转自:http://yejinxin.github.io/parse-shell-options-with-getopts-command/标准的Unix命令一般都提供很多选项,使用者通过命令行提供具体的选项和参数,格式如下:command -options parameters filenameg... 阅读全文

posted @ 2015-09-23 11:31 月未央 阅读(387) 评论(0) 推荐(0)

2015年9月22日

#pragma once

摘要: #pragma once 与 #ifndef 解析 为了避免同一个文件被include多次,C/C++中有两种方式,一种是#ifndef方式,一种是#pragma once方式。在能够支持这两种方式的编译器上,二者并没有太大的区别,但是两者仍然还是有一些细微的区别。 方式一: #ifndef __S... 阅读全文

posted @ 2015-09-22 10:12 月未央 阅读(318) 评论(0) 推荐(0)

2015年9月21日

linux——windows:上传、下载命令——rz,sz

摘要: 一般来说,linux服务器大多是通过ssh客户端来进行远程的登陆和管理的,使用ssh登陆linux主机以后,如何能够快速的和本地机器进行文件的交互呢,也就是上传和下载文件到服务器和本地; 与ssh有关的两个命令可以提供很方便的操作: sz:将选定的文件发送(send)到本地机器 rz:运行该命令会弹... 阅读全文

posted @ 2015-09-21 10:42 月未央 阅读(2363) 评论(0) 推荐(0)

2015年9月18日

Linux dos2unix命令——转换dos文件格式成unix文件格式,unix2dos——转换unix下文件格式成dos下文件格式

摘要: 转自http://3695625.blog.51cto.com/3685625/1088031用途说明dos2unix命令用来将DOS格式的文本文件转换成UNIX格式的(DOS/MAC to UNIX text file format converter)。DOS下的文本文件是以\r\n作为断行标志... 阅读全文

posted @ 2015-09-18 16:08 月未央 阅读(8045) 评论(0) 推荐(0)

Linux crontab定时执行任务 命令格式与详细例子

摘要: 基本格式 :* * * * * command分 时 日 月 周 命令第1列表示分钟1~59 每分钟用*或者 */1表示第2列表示小时1~23(0表示0点)第3列表示日期1~31第4列表示月份1~12第5列标识号星期0~6(0表示星期天)第6列要运行的命令crontab文件的一些例子:30... 阅读全文

posted @ 2015-09-18 16:05 月未央 阅读(328) 评论(0) 推荐(0)

rsync错误捕获 shell捕获返回码

摘要: 通过返回值判断:rsync返回值为$?,0表示成功1234567891011121314151617181920212223242526rsync xxx yyyret=$?if[ $ret -ne0]; thenecho"失败, 错误码: $ret"firsync常用的错误代码:0Success1... 阅读全文

posted @ 2015-09-18 16:00 月未央 阅读(2400) 评论(0) 推荐(0)

2015年9月16日

Hadoop Streaming 实战: 输出文件分割

摘要: 转自http://blog.csdn.net/yfkiss/article/details/6406432我们知道,Hadoop streaming框架默认情况下会以'/t’作为分隔符,将每行第一个'/t’之前的部分作为key,其余内容作为value,如果没有'/t’分隔符,则整行作为key;这个k... 阅读全文

posted @ 2015-09-16 12:10 月未央 阅读(443) 评论(0) 推荐(0)

上一页 1 ··· 5 6 7 8 9 10 11 12 13 下一页

导航