流了个火

摘要： 1. input变为不可编辑： http://blog.csdn.net/u010210251/article/details/49724193 2. js for循环绑定事件： http://www.cnblogs.com/yangjiewu/p/4753202.html <button id=" 阅读全文

摘要： 参考：http://blog.csdn.net/u010454030/article/details/69291663 和一般的saveAsTextFile不同之处在于增加了一个参数 classOf[GzipCodec] 阅读全文

摘要： 参考资料：http://www.cnblogs.com/richard-jing/archive/2013/01/27/Maven_localjar.html 使用本地jar 注意：system scope引入的包，在使用jar-with-dependencies打包时将不会被包含，可以使用reso 阅读全文

摘要： Spark java.io.IOException: Filesystem closed partition数量太小，读取数据后进行repartition重新分片再处理。 Spark Streaming问题： Spark Twitter Streaming exception : (org.apac 阅读全文

摘要： 回归和梯度下降： http://www.cnblogs.com/LeftNotEasy/archive/2010/12/05/mathmatic_in_machine_learning_1_regression_and_gradient_descent.html 深入梯度下降：http://www. 阅读全文

摘要： DataSet：面向对象的，从JVM进行构建，或从其它格式进行转化 DataFrame：面向SQL查询，从多种数据源进行构建，或从其它格式进行转化 RDD DataSet DataFrame互转 DataFrameTest1.scala DataFrameTest2.scala DataFrameT 阅读全文

摘要： 百度百科及维基百科解释 图：SaaS PaaS IaaS的区别 IaaS 消费者通过Internet 可以从完善的计算机基础设施获得服务。这类服务称为基础设施即服务(Infrastructure as a Service)。基于 Internet 的服务（如存储和数据库）是 IaaS的一部分。Int 阅读全文

摘要： 1.服务器的ip地址写到文件中，命名为nodelist.txt 2.编写运行脚本 例 功能是输出字符串hehe在 /usr/local/myjar/aaa.txt文件中。 阅读全文

摘要： 参考链接：apache kafka系列之在zookeeper中存储结构 http://blog.csdn.net/lizhitao/article/details/23744675 1.topic注册信息 /brokers/topics/[topic] : 存储某个topic的partitions所 阅读全文

摘要： 参考： http://www.iteye.com/topic/473355http://blog.sina.com.cn/s/blog_4b6047bc01000avq.html 什么是逃逸分析(Escape Analysis)? 在编程语言的编译优化原理中，分析指针动态范围的方法称之为逃逸分析。它 阅读全文

摘要： jvm源码分析之堆外内存完全解读 http://lovestblog.cn/blog/2015/05/12/direct-buffer/ 阅读全文

摘要： 参考资料： http://stackoverflow.com/questions/32281417/understadning-treereduce-in-spark http://stackoverflow.com/questions/34078430/treereduce-vs-reduceby 阅读全文

摘要： 参考资料：http://blog.csdn.net/chenssy/article/details/38151189 快速失败 是指某个线程在迭代vector的时候，不允许其他线程修改该vector的内容，这样迭代器迭代出来的结果就会不准确，如用iterator迭代collection的时候，ite 阅读全文

摘要： 参考资料：http://www.maljob.com/pages/newsDetail.html?id=394 参考资料：http://www.blogjava.net/liuguly/archive/2014/05/03/413172.html 1.为什么要有引用计数器 Netty里四种主力的By 阅读全文

摘要： 1. 官网下载源码 source code，地址： http://spark.apache.org/downloads.html 2. 使用maven编译： 注意在编译之前，需要设置java堆大小以及永久代大小，避免mvn出现内存溢出的情况。 windows下设置：%MAVEN_HOME%\bin\ 阅读全文

摘要： 有一个用户表，属性为 id,age,buytime 创建表以及插入数据的语句 查询: 1. buytime(购买时间)在1和3之间（包含1和3）的用户年龄分布情况 方法：先查询出购买时间在1和3之间的用户的年龄，然后对结果根据年龄分组，计算每个分组的数量 注意：上面的AS agenum是不可缺少的， 阅读全文

摘要： 参数的设定:参考资料 不错的资料：http://blog.csdn.net/honglei915/article/details/37697655 http://developer.51cto.com/art/201501/464491.htm 注意：在配置文件server.properties中指 阅读全文

摘要： 一、引子 在Worker Actor中，每次LaunchExecutor会创建一个CoarseGrainedExecutorBackend进程，Executor和CoarseGrainedExecutorBackend是1对1的关系。也就是说集群里启动多少Executor实例就有多少CoarseGr 阅读全文

摘要： 浅谈Graphx: http://blog.csdn.net/shangwen_/article/details/38645601Pregel: http://blog.csdn.net/shangwen_/article/details/38479835Bagel:http://ju.outofm... 阅读全文

摘要： 自定义filter需要继承的类：FilterBase类里面的方法调用顺序方法名作用1boolean filterRowKey(Cell cell)根据row key过滤row。如果需要被过滤掉，返回true；需要返回给客户端，返回false2ReturnCode filterKeyValue(Cel... 阅读全文