摘要: #!/bin/bash # 生成服务器keystore(密钥和证书)keytool -keystore server.keystore.jks -alias machine03.zheng.com -validity 365 -keyalg RSA -storepass leonzheng -key 阅读全文
posted @ 2017-07-12 11:02 LT-blogs 阅读(1665) 评论(0) 推荐(0) 编辑
摘要: Broker Configs Consumer Configs Producer Configs Producer Configs 阅读全文
posted @ 2017-05-31 09:56 LT-blogs 阅读(620) 评论(0) 推荐(0) 编辑
摘要: apache commons Math是一组偏向科学计算为主的函数,主要是针对线性代数,数学分析,概率和统计等方面。 我虽然是数学专业毕业,当年也是抱着《数学分析》啃,但是好久不用,这些概念都开始生疏,写一点例子,仅作参考。 阅读全文
posted @ 2017-01-04 17:12 LT-blogs 阅读(4580) 评论(0) 推荐(0) 编辑
摘要: 导入 Spark Mllib底层的向量、矩阵运算使用了Breeze库,Breeze库提供了Vector/Matrix的实现以及相应计算的接口(Linalg)。但是在MLlib里面同时也提供了Vector和Linalg等的实现。在使用Breeze库时,需要导入相关包: Import breeze.li 阅读全文
posted @ 2016-12-29 15:03 LT-blogs 阅读(5369) 评论(0) 推荐(1) 编辑
摘要: spark-2.0.2 机器学习库(MLlib)指南 MLlib是Spark的机器学习(ML)库。旨在简化机器学习的工程实践工作,并方便扩展到更大规模。MLlib由一些通用的学习算法和工具组成,包括分类、回归、聚类、协同过滤、降维等,同时还包括底层的优化原语和高层的管道API。 机器学习库(MLli 阅读全文
posted @ 2016-12-28 11:29 LT-blogs 阅读(5918) 评论(3) 推荐(1) 编辑
摘要: 1.mapValus(fun):对[K,V]型数据中的V值map操作(例1):对每个的的年龄加2 object MapValues { def main(args: Array[String]) { val conf = new SparkConf().setMaster("local").setA 阅读全文
posted @ 2016-12-22 10:29 LT-blogs 阅读(2184) 评论(0) 推荐(0) 编辑
摘要: 转载地址:http://m.blog.csdn.net/blog/le119126/42009281一.导入先修改源码 参考二.改错里面的第3条1.cd到 hadoop-2.6.0-src/hadoop-maven-pluginsmvn intall2.在cd到hadoop-2.6.0-src 目录... 阅读全文
posted @ 2015-12-16 16:56 LT-blogs 阅读(1715) 评论(0) 推荐(0) 编辑
摘要: 转载地址:http://blog.csdn.net/zhangzhaokun/article/details/44313531(1)安装环境 操作系统:Linux(centos6.5) JDK版本:1.7.0_45 Hadoop版本:hadoop2.2.0 Sqoop版本:s... 阅读全文
posted @ 2015-12-15 23:21 LT-blogs 阅读(1790) 评论(0) 推荐(0) 编辑
摘要: 转载地址:http://jingpin.jikexueyuan.com/article/47043.html本文先叙述如何配置eclipse中maven+scala的开发环境,之后,叙述如何实现spark的本地运行。最后,成功运行scala编写的spark程序。刚开始我的eclipse+maven环... 阅读全文
posted @ 2015-11-18 10:31 LT-blogs 阅读(3039) 评论(0) 推荐(0) 编辑
摘要: 转载地址:http://my.oschina.net/cjun/blog/475576一、新建java工程,并且导入hadoop相关jar包此处可以直接创建mapreduce项目就可以,不用下面折磨麻烦:4.1.2 新建java工程(需要手动导入hadoop相应jar包),具体如下图所示:4.1.2... 阅读全文
posted @ 2015-11-13 22:00 LT-blogs 阅读(1318) 评论(0) 推荐(0) 编辑
摘要: Thinking in BigData(九)大数据hadoop集群下离线数据存储和挖掘架构Thinking in BigData(八)大数据Hadoop核心架构HDFS+MapReduce+Hbase+Hive内部机理详解博主大牛啊,先收藏一下 阅读全文
posted @ 2015-10-30 20:29 LT-blogs 阅读(206) 评论(0) 推荐(0) 编辑
摘要: hadoop2.2安装教程:http://www.aboutyun.com/thread-7684-1-1.htmlhadoop2.X使用手册1:通过web端口查看主节点、slave1节点及集群运行状态hadoop2.X使用手册2:如何运行自带wordcounthadoop2.2运行mapreduc... 阅读全文
posted @ 2015-10-29 16:43 LT-blogs 阅读(132) 评论(0) 推荐(0) 编辑
摘要: 转载地址:http://www.cnblogs.com/sunwei2012/archive/2010/10/08/1845938.html普通泛型class Point{ // 此处可以随便写标识符号,T是type的简称 private T var ; // var的类型由T... 阅读全文
posted @ 2015-10-24 15:27 LT-blogs 阅读(143) 评论(0) 推荐(0) 编辑
摘要: 转载地址:http://blog.csdn.net/jinuxwu/article/details/6771121比较好的讲解:http://blog.csdn.net/lonelyroamer/article/details/7868820 http://blog.csdn.net/lonely... 阅读全文
posted @ 2015-10-23 15:58 LT-blogs 阅读(166) 评论(0) 推荐(0) 编辑
摘要: 转载地址:http://my.oschina.net/u/577453/blog/173724最近用到了HttpClient写爬虫,可能我有新版本强迫症,老是喜欢用新版本的东西(虽说新版本不一定好用),然后就用了HttpClient 4.3。HttpClient这货和Lucene一样,每个版本的AP... 阅读全文
posted @ 2015-10-18 18:42 LT-blogs 阅读(2855) 评论(0) 推荐(0) 编辑
摘要: 转载地址:https://www.ibm.com/developerworks/cn/opensource/os-cn-crawler/本小结简单的介绍一下 HttpClinet 和 HtmlParser 两个开源的项目,以及他们的网站和提供下载的地址。HttpClient 简介HTTP 协议是现在... 阅读全文
posted @ 2015-10-18 16:40 LT-blogs 阅读(245) 评论(0) 推荐(0) 编辑
摘要: 原文地址:http://zhidao.baidu.com/question/272718708.html 阅读全文
posted @ 2014-03-02 15:16 LT-blogs 阅读(805) 评论(0) 推荐(0) 编辑
摘要: Eclipse快捷键大全(转载)Ctrl+1 快速修复(最经典的快捷键,就不用多说了)Ctrl+D: 删除当前行 Ctrl+Alt+↓ 复制当前行到下一行(复制增加)Ctrl+Alt+↑ 复制当前行到上一行(复制增加)Alt+↓ 当前行和下面一行交互位置(特别实用,可以省去先剪切,再粘贴了)Alt+↑ 当前行和上面一行交互位置(同上)Alt+← 前一个编辑的页面Alt+→ 下一个编辑的页面(当然是针对上面那条来说了)Alt+Enter 显示当前选择资源(工程,or 文件 or文件)的属性Shift+Enter 在当前行的下一行插入空行(这时鼠标可以在当前行的任一位置,不一定是最后)Shift+ 阅读全文
posted @ 2012-09-05 16:07 LT-blogs 阅读(203) 评论(0) 推荐(0) 编辑
摘要: //新建一个ListView,也就是新建一个列表,在新建一个组件是会将一个Content传递给构造函数listView = new ListView(this);// 将ListView和ArrayAdapter进行绑定,listview会把ArrayAdapter里面的数据显示出来// ArrayAdapter的第一个参数是Context,即上下文的引用// 第二个参数为一个在R文件里定义的Layout,不过是系统的R文件// simple_list_item_single_choice表明ListView里边的每一项都只有一个TextView// 第三个参数为一个数组listView.se 阅读全文
posted @ 2012-08-08 11:31 LT-blogs 阅读(3231) 评论(0) 推荐(1) 编辑
摘要: 来自:http://blog.csdn.net/wanli_smile/article/details/6976387学习下!以后作为参考资料!!普通圆形ProgressBar 该类型进度条也就是一个表示运转的过程,例如发送短信,连接网络等等,表示一个过程正在执行中。一般只要在XML布局中定义就可以了。<progressBar android:id="@+id/widget43" android:layout_width="wrap_content" android:layout_height="wrap_content" an 阅读全文
posted @ 2012-08-07 09:30 LT-blogs 阅读(457) 评论(0) 推荐(0) 编辑