Wanna_Go

HDFS命令全总结

摘要： .copyFromLocal copyToLocal ls 列出hdfs文件系统根目录下的目录和文件列出hdfs文件系统所有的目录和文件 put hdfs file的父目录一定要存在，否则命令不会执行 hdfs dir 一定要存在，否则命令不会执行从键盘读取输入到hdfs file中，按Ctrl 阅读全文

posted @ 2018-01-22 16:03 Wanna_Go 阅读(669) 评论(0) 推荐(0)

使用TensorFlow中的Batch Normalization

摘要：问题训练神经网络是一个很复杂的过程，在 "前面" 提到了深度学习中常用的激活函数，例如ELU或者Relu的变体能够在开始训练的时候很大程度上减少梯度消失或者爆炸问题，但是却不能保证在训练过程中不出现该问题，例如在训练过程中每一层输入发生了改变了，那么我们就需要使用更小的learning rate 阅读全文

posted @ 2018-01-19 16:10 Wanna_Go 阅读(7464) 评论(1) 推荐(3)

深度学习中的激活函数

摘要：本节内容比较简单，通过python的模块画出深度学习中常用的激活函数 sigmoid 首先是sigmoid相信大家都不陌生，大家学习逻辑回归和神经网络的时候经常遇到。效果：从上面的图可以看出，当输入的值比较大或者比较小的时候值会保持在0和1，常被称为saturates 。当对这些位置进行求导的阅读全文

posted @ 2018-01-01 17:37 Wanna_Go 阅读(1990) 评论(0) 推荐(0)

23.从上往下打印二叉树

摘要：实际上就是二叉树的层次遍历，需要借助要给队列，需要注意的是队列数据结构在Java中的选取与使用。阅读全文

posted @ 2017-12-26 20:26 Wanna_Go 阅读(170) 评论(0) 推荐(0)

22.栈的压入、弹出序列

摘要：思路是借助辅助栈，先入栈，如果栈顶元素和出栈列相同则依次出栈。 import java.util.ArrayList; import java.util.Stack; public class Solution { public boolean IsPopOrder(int [] pushA,int 阅读全文

posted @ 2017-12-26 09:30 Wanna_Go 阅读(157) 评论(0) 推荐(0)

使用TensorFlow实现DNN

摘要：这一节使用TF实现一个多层神经网络模型来对数据集进行分类，这里我们设计一个含有两个隐藏层的神经网络，在输出部分使用softmax对结果进行预测。使用高级API实现多层神经网络这里我们使用包，这是一个高度封装的包，里面包含了许多类似一些实用的方法。先引入数据模型的主要代码其中这个方法阅读全文

posted @ 2017-12-18 00:22 Wanna_Go 阅读(5387) 评论(0) 推荐(3)

shell按行读取文件

摘要：这工作小半年了发现以前学的那么多流弊技能都不怎么用，倒是shell用的很多，自己已经从shell小菜鸟一步步走过来，已经要变成 =。= 经常需要用shell按行读取配置文件，自己在上面踩了很多坑，可依然没长记性，故记录下来。先创建一个测试用例 ; 使用while读取使用while读取文件时候需要配阅读全文

posted @ 2017-12-13 20:25 Wanna_Go 阅读(286) 评论(0) 推荐(0)

linux集群批量执行命令

摘要：因为工作需要，需要修改集群中机器的配置，一台一台的修改太浪费时间，就想能不能通过自动化脚本批量执行命令，尝试写一个，自己shell不熟悉，写的有点渣渣 if [ "$ " ne 2 ];then echo "USAGE:$0 f host_file cmd" exit 1 fi file_name= 阅读全文

posted @ 2017-12-11 16:24 Wanna_Go 阅读(1394) 评论(0) 推荐(0)

CDH升级

摘要：升级主要分为两部分1.CM的升级、2.CDH的升级 CM的升级两种升级方法 1.使用 "package" 2.使用Tarballs升级方法，参照 "官方" 升级指引，Tarball中包含了和`Cloudera Manager Agent` 通常情况下升级CM和升级CDH是两个独立的过程，可以在不阅读全文

posted @ 2017-12-11 12:31 Wanna_Go 阅读(1285) 评论(0) 推荐(0)

自动微分方法(auto diff)

摘要：学习机器学习的同学在学习过程中会经常遇到一个问题，那就是对目标函数进行求微分，线性回归这类简单的就不说、复杂的如神经网络类那些求导过程的。像我还是那种比较粗心的人往往有十九错，所以说自动求导就十分有必要了，本文主要介绍几种求导的方式。假设我们的函数为$f(x,y)=x^2y+y+2$，目标是求出阅读全文

posted @ 2017-12-08 20:55 Wanna_Go 阅读(8742) 评论(0) 推荐(1)

公告

导航