摘要:
神经网络结构的输出为所有输入的加权和,这导致整个神经网络是一个线性模型。如果将每一个神经元的输出通过一个非线性函数,那么整个神经网络的模型也就不再是线性的了,使得神经网络可以更好地解决较为复杂的问题。这个非线性函数也就是激活函数。 神经网络中激活函数的主要作用是提供网络的非线性建模能力,如不特别说明 阅读全文
posted @ 2018-11-28 14:56
赵莉
阅读(701)
评论(0)
推荐(0)
摘要:
对于官方的MNIST的例子,训练完之后就直接退出了,并没有将训练得到的模型保存下来方便下次直接使用。为了让训练结果可以复用,需要将训练得到的神经网络持久化。 TensorFlow提供了一个非常简单的API来保存和还原一个神经网络模型,这个模型就是tf.train.Saver类。 TensorFlow 阅读全文
posted @ 2018-11-28 14:54
赵莉
阅读(247)
评论(0)
推荐(0)
摘要:
根据MNIST数据实现完整的TensorFlow程序 构图逻辑是:先定义参数、接着定义神经网络模型,最后训练。 参数的定义:整个程序初始设置参数主要有初始学习率、学习衰减率、隐藏层节点数量、迭代轮数、输入层的节点数、输出层的节点数、BACTH_SIZE 、REGULARIZATION_RATE 、训 阅读全文
posted @ 2018-11-28 14:54
赵莉
阅读(278)
评论(0)
推荐(0)
摘要:
声明:参考自TensorFlow实战 TensorFlow中通过变量名称获取变量的机制主要是通过tf.get_variables/tf.Variable/tf.variable_scope函数实现的,且通过tf.get_variables()和tf.Variable()来创建变量是等价的。 变量作用 阅读全文
posted @ 2018-11-28 14:53
赵莉
阅读(368)
评论(0)
推荐(0)
摘要:
会话拥有并管理TensorFlow程序运行的所有资源,当所有程序运行结束后需要关闭会话来帮助系统回收资源,否则就可能出现资源泄露的问题。 第一种模式需要明确调用会话生产函数和关闭会话函数,代码流程如下: 当程序因为异常而退出,关闭会话的函数可能不会执行导致资源泄露,第二种方法就是通过python上下 阅读全文
posted @ 2018-11-28 14:49
赵莉
阅读(217)
评论(0)
推荐(0)
摘要:
本文仅对一些常见的优化方法进行直观介绍和简单的比较,主要是一阶的梯度法,包括SGD, Momentum, Nesterov Momentum, AdaGrad, RMSProp, Adam。 其中SGD,Momentum,Nesterov Momentum是手动指定学习速率的,而后面的AdaGrad 阅读全文
posted @ 2018-11-28 14:35
赵莉
阅读(2082)
评论(0)
推荐(0)
摘要:
python的set和其他语言类似, 是一个无序不重复元素集, 基本功能包括关系测试和消除重复元素。 集合对象还支持union(联合), intersection(交), difference(差)和sysmmetric difference(对称差集)等数学运算。 sets 支持 x in set 阅读全文
posted @ 2018-11-28 14:33
赵莉
阅读(956)
评论(0)
推荐(0)
摘要:
python中使用’@’ 作为函数的修饰符,可以在模块或者类的定义层内对函数进行修饰,出现在函数定义的前一行,不允许和函数定义在同一行。一个修饰符就是一个函数,它将被修饰的函数作为参数,并返回修饰后的同名函数或其他可调用的东西。 装饰模式有很多经典的使用场景,例如插入日志、性能测试、事务处理等等,有 阅读全文
posted @ 2018-11-28 14:31
赵莉
阅读(507)
评论(0)
推荐(0)
摘要:
首先回顾之前类的所有篇章: 【python】python中的类,对象,方法,属性初认识(一)详见链接 【python】详解类class的属性:类数据属性、实例数据属性、特殊的类属性、属性隐藏(二)详见链接 【python】详解类class的方法:实例方法、类方法、静态方法(三)详见链接 【pytho 阅读全文
posted @ 2018-11-28 14:27
赵莉
阅读(955)
评论(0)
推荐(0)
摘要:
Python中没有访问控制的关键字,例如private、protected等等。但是,在Python编码中,有一些约定来进行访问控制。 1、单下划线"_" 在Python中,通过单下划线"“来实现模块级别的私有化,变量除外。一般约定以单下划线”"开头的函数为模块私有的,也就是说"from modul 阅读全文
posted @ 2018-11-28 14:26
赵莉
阅读(391)
评论(0)
推荐(0)

浙公网安备 33010602011771号