03 2018 档案

spark学习（2）--hadoop安装、配置
摘要：环境: 三台机器 ubuntu14.04 hadoop2.7.5 jdk-8u161-linux-x64.tar.gz （jdk1.8） 架构： machine101 ：名称节点、数据节点、SecondaryNaemnode（辅助名称节点）、ResourceManager、NodeManger ma 阅读全文
posted @ 2018-03-29 20:13 透明的红萝卜 阅读(310) 评论(0) 推荐(0)
Tensorflow学习笔记（1）--安装
摘要：安装 1、ubuntu 14.04 2、 清华大学开源软件镜像站：https://mirrors.tuna.tsinghua.edu.cn/help/tensorflow/ 3、测试是否成功，出现下图表示成功 阅读全文
posted @ 2018-03-28 10:04 透明的红萝卜 阅读(133) 评论(0) 推荐(0)
spark学习（1）--ubuntu14.04集群搭建、配置（jdk）
摘要：环境：ubuntu14.04 jdk-8u161-linux-x64.tar.gz 1、文本模式桌面模式切换 ctrl+alt+F6 切换到文本模式 ctrl + alt +F7 /输入命令startx切换到桌面模式 2、更改Ip地址、主机名 /etc/hostname - 改主机名称 /etc/h 阅读全文
posted @ 2018-03-26 17:44 透明的红萝卜 阅读(296) 评论(0) 推荐(0)
VMware Workstation虚拟机Ubuntu中实现与主机共享（复制和粘贴）
摘要：VMware Workstation中安装虚拟机Ubuntu后，开始都不能与主机实现共享，即相互之间能实现复制粘贴的功能。要解决问题，只需要安装VMvare tools后然后重启虚拟机Ubuntu即可。在windows虚拟机下，在安装该工具时有安装向导，但在Linux系统（Ubuntu）下需要通过t 阅读全文
posted @ 2018-03-26 11:15 透明的红萝卜 阅读(619) 评论(0) 推荐(0)
Docker部署JavaWeb项目实战
摘要：林炳文Evankaka原创作品。转载请注明出处http://blog.csdn.net/evankaka 摘要：本文主要讲了如何在Ubuntu14.04 64位系统下来创建一个运行Java web应用程序的Docker容器。 一、下载镜像、启动容器 1、下载镜像 先查看镜像 [html] view 阅读全文
posted @ 2018-03-18 21:28 透明的红萝卜 阅读(263) 评论(0) 推荐(0)
流量分析系统----实现-echarts模拟迁移(bmap.js/china.js)
摘要：china.js: bmap.js： 阅读全文
posted @ 2018-03-14 15:35 透明的红萝卜 阅读(652) 评论(0) 推荐(0)
流量分析系统---echarts模拟迁移中 ，geocoord从后台获取动态数值
摘要：由于在echarts的使用手册中说了 {Object} geoCoord (geoCoord是Object类型) ，所以不能用传统的字符串拼接或数组的方式赋值。在后台的controller中用Map<String, double[]> geocoordMap=new HashMap<String, 阅读全文
posted @ 2018-03-14 15:12 透明的红萝卜 阅读(1379) 评论(1) 推荐(0)
使用idea2016导出web项目war包
摘要：第一步配置Web Application:Exploded（已经配置的可以跳到第二步）： 打开project structure（默认的快捷键是Ctrl+Alt+Shift+S），依次选择Artifacts》+》Web Application:Exploded》From Module选择项目相应的m 阅读全文
posted @ 2018-03-13 15:57 透明的红萝卜 阅读(545) 评论(0) 推荐(0)
真正
摘要：logMonitor storm部分 通过Maven构建，生成一个包含依赖的single jar文件（不要把Storm的依赖包添加进去） 1、修改storm的main入口 2、修改MessageFilterBolt 3、添加<scope>provided</scope> storm命令行客户端，运行 阅读全文
posted @ 2018-03-07 21:55 透明的红萝卜 阅读(230) 评论(0) 推荐(0)
谷歌机器学习速成课程---降低损失 (Reducing Loss)：随机梯度下降法
摘要：在梯度下降法中，批量指的是用于在单次迭代中计算梯度的样本总数。到目前为止，我们一直假定批量是指整个数据集。就 Google 的规模而言，数据集通常包含数十亿甚至数千亿个样本。此外，Google 数据集通常包含海量特征。因此，一个批量可能相当巨大。如果是超大批量，则单次迭代就可能要花费很长时间进行计算 阅读全文
posted @ 2018-03-02 19:59 透明的红萝卜 阅读(214) 评论(0) 推荐(0)
谷歌机器学习速成课程---3降低损失 (Reducing Loss)：学习速率
摘要：正如之前所述，梯度矢量具有方向和大小。梯度下降法算法用梯度乘以一个称为学习速率（有时也称为步长）的标量，以确定下一个点的位置。例如，如果梯度大小为 2.5，学习速率为 0.01，则梯度下降法算法会选择距离前一个点 0.025 的位置作为下一个点。 超参数是编程人员在机器学习算法中用于调整的旋钮。大多 阅读全文
posted @ 2018-03-02 19:33 透明的红萝卜 阅读(291) 评论(0) 推荐(0)
谷歌机器学习速成课程---3降低损失 (Reducing Loss)：梯度下降法
摘要：迭代方法图（图 1）包含一个标题为“计算参数更新”的华而不实的绿框。现在，我们将用更实质的方法代替这种华而不实的算法。 假设我们有时间和计算资源来计算 w1 的所有可能值的损失。对于我们一直在研究的回归问题，所产生的损失与 w1 的图形始终是凸形。换言之，图形始终是碗状图，如下所示： 图 2. 回归 阅读全文
posted @ 2018-03-02 19:29 透明的红萝卜 阅读(539) 评论(0) 推荐(0)
谷歌机器学习速成课程---3降低损失：迭代方法
摘要：迭代学习可能会让您想到“Hot and Cold”这种寻找隐藏物品（如顶针）的儿童游戏。在我们的游戏中，“隐藏的物品”就是最佳模型。刚开始，您会胡乱猜测（“w1 的值为 0。”），等待系统告诉您损失是多少。然后，您再尝试另一种猜测（“w1 的值为 0.5。”），看看损失是多少。哎呀，这次更接近目标了 阅读全文
posted @ 2018-03-02 17:46 透明的红萝卜 阅读(227) 评论(0) 推荐(0)
谷歌机器学习速成课程---1框架处理
摘要：本文内容摘自 谷歌机器学习免费课程MLCC： https://developers.google.com/machine-learning/crash-course/ 什么是（监督式）机器学习？简单来说，它的定义如下： 机器学习系统通过学习如何组合输入信息来对从未见过的数据做出有用的预测。 下面我们 阅读全文
posted @ 2018-03-02 17:01 透明的红萝卜 阅读(212) 评论(0) 推荐(0)