Dlimeng

2018年4月9日

摘要：大数据的核心就是预测。它通常被视为人工智能的一部分，或者更确切地说，被视为一种机器学习。但是这种定义是有误导性的。大数据不是要教机器像人一样思考。相反，它是把数学算法运用到海量的数据上来预测事情发生的可能性。一.思维 1.不是随机样本,全体数据小数据时代的主要方式随机采样：采样分析的精确性随阅读全文

posted @ 2018-04-09 12:20 Dlimeng 阅读(14) 评论(0) 推荐(0)

大话数据--思维

摘要：大数据的核心就是预测。它通常被视为人工智能的一部分，或者更确切地说，被视为一种机器学习。但是这种定义是有误导性的。大数据不是要教机器像人一样思考。相反，它是把数学算法运用到海量的数据上来预测事情发生的可能性。一.思维 1.不是随机样本,全体数据小数据时代的主要方式随机采样：采样分析的精确性随阅读全文

posted @ 2018-04-09 12:20 Dlimeng 阅读(20) 评论(0) 推荐(0)

2018年4月3日

分布式锁02--zookeeper

摘要：一.简介 Zookeeper 是Google 的 Chubby一个开源的实现，是 Hadoop 的分布式协调服务。它包含一个简单的原语集，分布式应用程序可以基于它实现同步服务，配置维护和命名服务等。为什么使用Zookeeper：大部分分布式应用需要一个主控、协调器或控制器来管理物理分布的子进程阅读全文

posted @ 2018-04-03 10:47 Dlimeng 阅读(11) 评论(0) 推荐(0)

分布式锁02--zookeeper_李孟_新浪博客

摘要：一.简介 Zookeeper 是Google 的 Chubby一个开源的实现，是 Hadoop 的分布式协调服务。它包含一个简单的原语集，分布式应用程序可以基于它实现同步服务，配置维护和命名服务等。为什么使用Zookeeper：大部分分布式应用需要一个主控、协调器或控制器来管理物理分布的子进程阅读全文

posted @ 2018-04-03 10:47 Dlimeng 阅读(9) 评论(0) 推荐(0)

分布式锁01--介绍

摘要：一.死锁发生的条件在分布式计算系统中，有两个以上的进程在并发执行，每个进程都在等待被其它的进程所占用的系统资源而不能继续运行，即导致系统中任何一个进程都无法运行下去（死循环），这就产生了死锁。当且仅当以下四个条件同时成立时，死锁才会发生： 1) 互斥。同一个资源在同一时刻最多只能被一个进程占用。阅读全文

posted @ 2018-04-03 10:30 Dlimeng 阅读(18) 评论(0) 推荐(0)

分布式锁01--介绍_李孟_新浪博客

摘要：一.死锁发生的条件在分布式计算系统中，有两个以上的进程在并发执行，每个进程都在等待被其它的进程所占用的系统资源而不能继续运行，即导致系统中任何一个进程都无法运行下去（死循环），这就产生了死锁。当且仅当以下四个条件同时成立时，死锁才会发生： 1) 互斥。同一个资源在同一时刻最多只能被一个进程占用。阅读全文

posted @ 2018-04-03 10:30 Dlimeng 阅读(10) 评论(0) 推荐(0)

2018年4月2日

分布式领域重要原理

摘要：一.FLP 不可能性原理 FLP 不可能原理：在网络可靠，存在节点失效（即便只有一个）的最小化异步模型系统中，不存在一个可以解决一致性问题的确定性算法。提出该定理的论文是由 Fischer, Lynch 和 Patterson 三位作者于 1985 年发表，该论文后来获得了 Dijkstra（就是阅读全文

posted @ 2018-04-02 12:01 Dlimeng 阅读(22) 评论(0) 推荐(0)

分布式领域重要原理_李孟_新浪博客

摘要：一.FLP 不可能性原理 FLP 不可能原理：在网络可靠，存在节点失效（即便只有一个）的最小化异步模型系统中，不存在一个可以解决一致性问题的确定性算法。提出该定理的论文是由 Fischer, Lynch 和 Patterson 三位作者于 1985 年发表，该论文后来获得了 Dijkstra（就是阅读全文

posted @ 2018-04-02 12:01 Dlimeng 阅读(7) 评论(0) 推荐(0)

2018年4月1日

poi读取word--空格

摘要： /** * 判断Str是否是选择题选择项 * @param str 内容 * @return */ public static boolean isSelecteTitele(String str) { Pattern pattern = Pattern.compile("^([a-zA-Z]+[\ 阅读全文

posted @ 2018-04-01 15:47 Dlimeng 阅读(18) 评论(0) 推荐(0)

Spark介绍系列05--RDD

摘要： url:Spark介绍系列04--RDD 一.Lineage RDD只支持粗粒度转换，即在大量记录上执行的单个操作。将创建RDD的一系列Lineage（即血统）记录下来，以便恢复丢失的分区。RDD的Lineage会记录RDD的元数据信息和转换行为，当该RDD的部分分区数据丢失时，它可以根据这些信息来阅读全文

posted @ 2018-04-01 12:11 Dlimeng 阅读(12) 评论(0) 推荐(0)

公告