zzzzMing -大数据技术

摘要： 在很多的流处理框架的介绍中，都会说kafka是一个可靠的数据源，并且推荐使用Kafka当作数据源来进行使用。这是因为与其他消息引擎系统相比，kafka提供了可靠的数据保存及备份机制。并且通过消费者位移这一概念，可以让消费者在因某些原因宕机而重启后，可以轻易得回到宕机前的位置。 但其实kafka的可靠 阅读全文

摘要： 本篇主要介绍kafka的分区和副本，因为这两者是有些关联的，所以就放在一起来讲了，后面顺便会给出一些对应的配置以及具体的实现代码，以供参考~ 1.kafka分区机制 分区机制是kafka实现高吞吐的秘密武器，但这个武器用得不好的话也容易出问题，今天主要就来介绍分区的机制以及相关的部分配置。 首先，从 阅读全文

摘要： 上一篇讲述了什么是分布式一致性问题，以及它难在哪里，liveness和satefy问题，和FLP impossibility定理。有兴趣的童鞋可以看看 "分布式系统一致性问题与Raft算法（上）" 。 这一节主要介绍raft算法是如何解决分布式系统中一致性问题的。说起raft大家可能比较陌生，但zo 阅读全文

摘要： 分布式系统一致性难吗？很难，难的哪里？最后又该如何解决。 阅读全文

摘要： 前情提要 Scala函数式编程指南（一） 函数式思想介绍 scala函数式编程（二） scala基础语法介绍 Scala函数式编程（三） scala集合和函数 Scala函数式编程（四）函数式的数据结构 上 Scala函数式编程（四）函数式的数据结构 下 1.面向对象的错误处理 在介绍scala的函 阅读全文

摘要： 前情提要 "Scala函数式编程指南（一） 函数式思想介绍" "scala函数式编程（二） scala基础语法介绍" "Scala函数式编程（三） scala集合和函数" "Scala函数式编程（四）函数式的数据结构 上" 1.List代码解析 今天介绍的内容，主要是对上一篇介绍的scala函数式数 阅读全文

摘要： 函数式编程的数据结构是什么样的呢？和我们最早接触到的数据结构有什么区别呢？ 阅读全文

摘要： 相比于逻辑回归，在很多情况下，SVM算法能够对数据计算从而产生更好的精度。而传统的SVM只能适用于二分类操作，不过却可以通过核技巧（核函数），使得SVM可以应用于多分类的任务中。 本篇文章只是介绍SVM的原理以及核技巧究竟是怎么一回事，最后会介绍sklearn svm各个参数作用和一个demo实战的 阅读全文

摘要： 前情提要： "通俗地说逻辑回归【Logistic regression】算法（一） 逻辑回归模型原理介绍" 上一篇主要介绍了逻辑回归中，相对理论化的知识，这次主要是对上篇做一点点补充，以及介绍sklearn 逻辑回归模型的参数，以及具体的实战代码。 1.逻辑回归的二分类和多分类 上次介绍的逻辑回归的 阅读全文

摘要： 在说逻辑回归前，还是得提一提他的兄弟，线性回归。在某些地方，逻辑回归算法和线性回归算法是类似的。但它和线性回归最大的不同在于，逻辑回归是作用是分类的。 阅读全文