佟学强

摘要： package com.txq.test; /** * quicksort,三方面改进：①三数中值选择枢纽元②容量小的时候使用插入排序③重复元素的处理 * @author XueQiang Tong * @date 2017/10/25 */ public class QS { public void quicksort(int []arr,int low,int high){ ... 阅读全文

摘要： BP算法是神经网络的基础，也是最重要的部分。由于误差反向传播的过程中，可能会出现梯度消失或者爆炸，所以需要调整损失函数。在LSTM中，通过sigmoid来实现三个门来解决记忆问题，用tensorflow实现的过程中，需要进行梯度修剪操作，以防止梯度爆炸。RNN的BPTT算法同样存在着这样的问题，所以 阅读全文

摘要： 深度学习，知识图谱，nlp学习经历 获取信息来源：英文paper研读，吴恩达公开课，Hiton公开课，北大nlp教材，英文最新学术论文，中科院院士技术博客，知识图谱专家课程自学进修路线：基础理论 专业理论(公开课，讲义，教材，技术博客) 框架原理及使用：sparkMLlib,tensorflow 最 阅读全文

摘要： nlp领域里，语义理解仍然是难题！ 给你一篇文章或者一个句子，人们在理解这些句子时，头脑中会进行上下文的搜索和知识联想。通常情况下，人在理解语义时头脑中会搜寻与之相关的知识。知识图谱的创始人人为，构成这个世界的是实体，而不是字符串，这从根本上改变了过去搜索的体系。语义理解其实是基于知识，概念和这些概 阅读全文

摘要： import collections import math import os import random import zipfile import numpy as np import urllib.request as request import tensorflow as tf url = 'http://mattmahoney.net/dc/' def maybe_downlo... 阅读全文

摘要： tensorflow的关于LSTM的代码，经过反复的调试和修改，终于运行成功了，可以把训练过程的结果保存起来，然后预测的时候直接取出来。花了很长时间才把官网上的代码调试成功，里面的坑有很多需要填补，还有源代码，都需要认真解读，关于tensorflow的高级结构，比如队列和多线程，也涉及到了。 阅读全文

摘要： 知识图谱与语义相似度的关系 阅读全文

摘要： 训练完一个模型后，为了以后重复使用，通常我们需要对模型的结果进行保存。如果用Tensorflow去实现神经网络，所要保存的就是神经网络中的各项权重值。建议可以使用Saver类保存和加载模型的结果。 1、使用tf.train.Saver.save()方法保存模型 tf.train.Saver.save 阅读全文

摘要： 黄文坚的tensorflow实战一书中的第四章，讲述了tensorflow实现多层感知机。Hiton早年提出过自编码器的非监督学习算法，书中的代码给出了一个隐藏层的神经网络，本人扩展到了多层，改进了代码。实现多层神经网络时，把每层封装成一个NetLayer对象(本质是单向链表)，然后计算隐藏层输出值 阅读全文

摘要： 导语 提升一个模型的表现有时很困难。如果你们曾经纠结于相似的问题，那我相信你们中很多人会同意我的看法。你会尝试所有曾学习过的策略和算法，但模型正确率并没有改善。你会觉得无助和困顿，这是 90% 的数据科学家开始放弃的时候。 不过，这才是考验真本领的时候!这也是普通的数据科学家跟大师级数据科学家的差距 阅读全文