2018 年 4月随笔档案 - 陈峰

[转]一文读懂《梁宁·产品思维30讲》最精华内容（含全套PPT）

摘要：http://chuansong.me/n/2294260949029 8 年前，我的主业是产品经理，产品思维改变了我认识世界的方式，让我明白司空见惯的设计，也有其底层逻辑。几年后我接触培训、运营自媒体……基于产品能力，我从 IT 男变成了创业者。年前，在得到 App 听完《梁宁· 产品思维 3 阅读全文

posted @ 2018-04-27 11:07 陈峰阅读(11674) 评论(0) 推荐(0)

dubbo 框架文档地址

摘要：http://dubbo.apache.org/books/dubbo dev book/ http://dubbo.apache.org/books/dubbo admin book/ http://dubbo.apache.org/books/dubbo user book/ 阅读全文

posted @ 2018-04-26 16:18 陈峰阅读(198) 评论(0) 推荐(0)

Spring架构-01-微服务架构

摘要：一、单体架构所有功能，所有模块都耦合在一个系统里面，如传统的一MVC。需要重新编译测试，重新部署。伸缩性差可靠性差系统迭代困难跨开发语言程序低团队协作麻烦二、微服务架构常见架构风格： C/S B/S 基于组件的架构分层架构面向服务的架构 SOA 微服务，是一种架构风格；是系阅读全文

posted @ 2018-04-26 14:43 陈峰阅读(543) 评论(0) 推荐(0)

[转]Spark 踩坑记：数据库（Hbase+Mysql）

摘要：https://cloud.tencent.com/developer/article/1004820 Spark 踩坑记：数据库（Hbase+Mysql）前言在使用Spark Streaming的过程中对于计算产生结果的进行持久化时，我们往往需要操作数据库，去统计或者改变一些值。最近一个实时阅读全文

posted @ 2018-04-25 23:58 陈峰阅读(579) 评论(0) 推荐(0)

[转]kafka介绍

摘要：转自 https://www.cnblogs.com/hei12138/p/7805475.html 1. kafka介绍 1.1. 主要功能根据官网的介绍，ApacheKafka®是一个分布式流媒体平台，它主要有3种功能： 1：It lets you publish and subscribe 阅读全文

posted @ 2018-04-24 21:04 陈峰阅读(561) 评论(0) 推荐(0)

大数据-06-Spark之读写Hive数据

摘要：简介 Hive中的表是纯逻辑表，就只是表的定义等，即表的元数据。Hive本身不存储数据，它完全依赖HDFS和MapReduce。这样就可以将结构化的数据文件映射为为一张数据库表，并提供完整的SQL查询功能，并将SQL语句最终转换为MapReduce任务进行运行。而HBase表是物理表，适合存放非结阅读全文

posted @ 2018-04-20 13:14 陈峰阅读(13867) 评论(0) 推荐(1)

大数据-05-Spark之读写HBase数据

摘要：本文主要来自于 http://dblab.xmu.edu.cn/blog/1316 2/ 谢谢原作者准备工作一：创建一个HBase表这里依然是以student表为例进行演示。这里假设你已经成功安装了HBase数据库，如果你还没有安装，可以参考[大数据 04 Hbase入门][1],进行安装，安装阅读全文

posted @ 2018-04-19 22:04 陈峰阅读(4931) 评论(0) 推荐(0)

大数据-04-Hbase入门

摘要：本文主要来自于 http://dblab.xmu.edu.cn/blog/install hbase/ 谢谢原作者本指南介绍了HBase，并详细指引读者安装HBase. 前面第二章学习指南已经指导大家安装Linux操作系统，并安装配置了Hadoop。相关安装可以查看“[大数据 01 安装Hadoo 阅读全文

posted @ 2018-04-19 20:45 陈峰阅读(533) 评论(0) 推荐(0)

大数据-03-Spark入门

摘要：Spark 简介行业广泛使用Hadoop来分析他们的数据集。原因是Hadoop框架基于一个简单的编程模型（MapReduce）。这里，主要关注的是在处理大型数据集时在查询之间的等待时间和运行程序的等待时间方面保持速度。 Hadoop只是实现Spark的方法之一。Spark以两种方式使用Hadoop 阅读全文

posted @ 2018-04-18 20:50 陈峰阅读(662) 评论(0) 推荐(0)

大数据-02-Scala入门

摘要：Scala 简介它是一门基于JVM的面向函数和面向对象的编程语言，它包含了求值表达式，闭包，切片操作，模式匹配，隐式转换等特性。可变量/不可变量可变集合/不可变集合、集合操作函数值函数求值表达式函数柯里化偏部分应用函数偏函数闭包类(封装、继承、多态) 特质单例类伴生单例阅读全文

posted @ 2018-04-16 20:11 陈峰阅读(360) 评论(0) 推荐(0)

[转]Hadoop家族学习路线图

摘要：Hadoop家族学习路线图 Hadoop家族系列文章，主要介绍Hadoop家族产品，常用的项目包括Hadoop, Hive, Pig, HBase, Sqoop, Mahout, Zookeeper, Avro, Ambari, Chukwa，新增加的项目包括，YARN, Hcatalog, Ooz 阅读全文

posted @ 2018-04-16 19:38 陈峰阅读(556) 评论(0) 推荐(0)

大数据-01-安装Hadoop

摘要：环境服务器：ubuntu 16.04.3 desktop amd64.iso 创建hadoop用户本文中会大量使用到sudo命令。sudo是ubuntu中一种权限管理机制，管理员可以授权给一些普通用户去执行一些需要root权限执行的操作。当使用sudo命令时，就需要输入您当前用户的密码. 接着使阅读全文

posted @ 2018-04-15 20:33 陈峰阅读(741) 评论(0) 推荐(0)

[转]熵(Entropy),交叉熵(Cross-Entropy),KL-松散度(KL Divergence)

摘要：https://www.cnblogs.com/silent-stranger/p/7987708.html 1.介绍：当我们开发一个分类模型的时候，我们的目标是把输入映射到预测的概率上，当我们训练模型的时候就不停地调整参数使得我们预测出来的概率和真是的概率更加接近。这篇文章我们关注在我们的模型阅读全文

posted @ 2018-04-09 21:11 陈峰阅读(353) 评论(0) 推荐(0)

[转]EM算法（Expectation Maximization Algorithm）详解

摘要：https://blog.csdn.net/zhihua_oba/article/details/73776553 EM算法（Expectation Maximization Algorithm）详解主要内容 EM算法简介预备知识极大似然估计 Jensen不等式 EM算法详解问题描述 EM算阅读全文

posted @ 2018-04-02 11:08 陈峰阅读(576) 评论(0) 推荐(0)