xiaoyon

摘要： 前言 本测试demo基于Spring框架测试，这几个月也是刚刚接触Spring的项目。如果不对的地方请多谅解。 正文 1、创建测试类，添加注解 总结 大致就这么一个简单过程，封装起来就可以灵活应用了。也是第一次用Mock写测试，还请谅解。 Life is a journey. What we sho 阅读全文

摘要： 背景 闲来没事把mybatis再熟悉一下，可能之前自己搭过没有记录。mybatis其实就是一个orm框架，在我们之前做.net工作的时候，我们的ef，dapper等都是这样的框架，java现在web流行的就是ssm框架，Spring+SpringMVC+Mybatis。今天我要搭的只是mybatis 阅读全文

摘要： 地址：www.linuxidc.com/Linux/2016-07/133283.htm 阅读全文

摘要： 正文 也是认识的一个小哥们最近面试题中给出的一个二叉树前中后序的题。 记得当初自己已经很明白这个前中后序的过程，然后今天却算了好了好久通过查询相关知识，只能对着结果自己一遍一遍的算，不停的写那个结果最后还是搞明白了，这次要把过程 给记录下来。 二叉树的前序（1-2-3-4-5-6-7-8-9），中序 阅读全文

摘要： 正文 打开官网http://hadoop.apache.org/docs/r2.6.5/hadoop-yarn/hadoop-yarn-site/YARN.html，将图片拿过来。 我用的是2.6.5的hadoop，2.x的yarn已经进行了升级。首相映入眼帘的是Resource Manager,我 阅读全文

摘要： 正文 首先打开spark官网，找一个自己用版本我选的是1.6.3的，然后进入SparkStreaming ，通过搜索这个位置找到Kafka， 点击过去会找到一段Scala的代码 如果想看createStream方法，可以值通过SparkStreaming中的 Where to go from her 阅读全文

摘要： 正文 中午闲着有点时间，做个demo睡觉去，这个例子网上应该都有，自己只是敲一下给自己做个记录。 public static void main(String[] args) { int[] whitelist = new int[]{12,13,34,56,78,88,99,100}; Array 阅读全文

摘要： 正文 上一篇简单的写了一个socketTextStream的demo，这个问题就是每一次不能将之前和之后的数据进行合并统一。接下来我们通过demo进行把着这个问题解决。 通过代码中的注释已经算是对这个方法的解释了，因为他可以拿到上一个计算结果，同时能读到当前数据，进行合并就显得简单的多了sc.che 阅读全文

摘要： 正文 SparkStreaming的入口是StreamingContext，通过scala实现 一个简单的实时获取数据。代码SparkStreaming官网也可以找到。 通过maven配置相关的配置，可能有时候会遇到如下情况： 找到你的maven配置pop.xml,将对应的spark-streami 阅读全文

摘要： 正文 下载Spark版本，这版本又要求必须和jdk与hadoop版本对应。 tar -zxvf 解压到指定目录，进入conf进行培训。spark-env.sh.template 改为 spark-env.sh，注册 export SPARK_DAEMON_JAVA_OPTS="-Dspark.dep 阅读全文