xxxxxxxx1x2xxxxxxx

2016年大数据工程师必备的9项技能

摘要： Apache Hadoop Hadoop现在已经进入第二个10年发展期了, 但不可否认的是, Hadoop在2014年出现了井喷式发展, 由于Hadoop从测试集群向生产和软件供应商方向不断转移, 其越来越接近于分布式存储和处理机架构, 因此, 这一势头在2015年会更加猛烈。由于大数据平台的强大, 阅读全文

posted @ 2016-04-11 21:40 xxxxxxxx1x2xxxxxxx 阅读(217) 评论(0) 推荐(0)

Linux IP代理筛选系统（shell+proxy）

摘要：代理的用途其实，除了抓取国外网页需要用到IP代理外，还有很多场景会用到代理：通过代理访问一些国外网站，绕过被某国防火墙过滤掉的网站使用教育网的代理服务器，可以访问到大学或科研院所的内部网站资源利用设置代理，把请求通过代理服务器下载缓存后，再传回本地，提高访问速度黑客发动攻击时，可以通过使用阅读全文

posted @ 2016-04-07 16:18 xxxxxxxx1x2xxxxxxx 阅读(491) 评论(0) 推荐(0)

shell字符串长度

摘要： echo -n xxxxx |wc -c echo xxxx|awk '{print length($0)}' echo “$str”|awk '{print length($0)}' awk '{$a=length($0);print $a;}' filename ${#string} $stri 阅读全文

posted @ 2016-04-05 13:42 xxxxxxxx1x2xxxxxxx 阅读(217) 评论(0) 推荐(0)

爬虫总结_java

摘要：基于webmagic的爬虫项目经验小结大概在1个月前，利用webmagic做了一个爬虫项目，下面是该项目的一些个人心得，贴在这里备份：一、为什么选择webmagic? 说实话，开源的爬虫框架已经很多了，有各种语言（比如：python、java）实现的，有单机的，还有大型分布式的，多达上百种，详情阅读全文

posted @ 2016-04-01 15:37 xxxxxxxx1x2xxxxxxx 阅读(394) 评论(0) 推荐(0)

7个基于Linux命令行的文件下载和网站浏览工具

摘要： 7个基于Linux命令行的文件下载和网站浏览工具 7个基于Linux命令行的文件下载和网站浏览工具时间:2015-06-01 09:36来源:linux.cn 编辑:linux.cn 点击: 2282 次 Linux命令行是GNU/Linux中最神奇迷人的部分，它是非常强大的工具。命令行本身功能多阅读全文

posted @ 2016-03-31 17:42 xxxxxxxx1x2xxxxxxx 阅读(245) 评论(0) 推荐(0)

从response.header中提取cookie,在request里添加cookie

摘要： // List<String> resp = new ArrayList<String>(); // HeaderIterator headers = response.headerIterator("Set-Cookie");// while(headers.hasNext()){// resp. 阅读全文

posted @ 2016-03-31 13:24 xxxxxxxx1x2xxxxxxx 阅读(2942) 评论(0) 推荐(0)

python开发与实战content

摘要：课时10_字典和集合课时11 练习：列表运算.doc 课时12_讨论答疑：日志、引用、单例模式等课时13_函数式编程课时14 练习：编程实现若干函数.doc 课时15_练习讲解：编写函数课时16_Python面向对象编程课时17 练习：面向对象编程.doc 课时18_练习讲解：面向对象与集阅读全文

posted @ 2016-03-30 22:21 xxxxxxxx1x2xxxxxxx 阅读(218) 评论(0) 推荐(0)

Excel单元格内容太多会覆盖遮住下一单元格范围

摘要： Excel单元格内容太多会覆盖遮住下一单元格范围分步阅读 Excel单元格内容太多会覆盖遮住下一单元格范围分步阅读 Excel中的单元格内容，有着不同的对齐方式。用户可根据自己的需求，在处理数据的时候，自行设置所需要的对齐方式。当您在处理数据的时候，如果设置不当，就会遇到这样的问题：Excel单元阅读全文

posted @ 2016-03-30 22:15 xxxxxxxx1x2xxxxxxx 阅读(2222) 评论(0) 推荐(0)

java大牛list

摘要： 1 Java的未来 Java能干什么、不能干什么，一开始就要搞清楚。这对于成为一个纯种的Java程序猿至关重要。 2 构建Java运行环境 Java运行在服务器，服务器都是Linux系统，对于真正程序猿而言，Windows只是用来打游戏的。 3 搭建Java开发环境开发时可以用Windows，听说阅读全文

posted @ 2016-03-30 22:08 xxxxxxxx1x2xxxxxxx 阅读(337) 评论(0) 推荐(0)

Linux版EPUB阅读器

摘要： Linux版EPUB阅读器如果说用平板电脑看书尚属主流的话，那么在电脑上读书就非常少见了。专注阅读16世纪的书是非常困难的了，没人希望后台蹦出QQ聊天窗口。但是如果你非要在电脑上打开电子书的话，那么你需要一个电子书阅读软件。大多数出版物支持使用EPUB格式的电子书（电子出版物）。幸运的是，linu 阅读全文

posted @ 2016-03-29 15:44 xxxxxxxx1x2xxxxxxx 阅读(623) 评论(0) 推荐(1)

yyyyyyyyyyyyyyyyyyyy

公告