会员
周边
新闻
博问
闪存
众包
赞助商
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
SENTIMENT_SONNE
博客园
首页
新随笔
订阅
管理
上一页
1
2
3
4
下一页
2019年11月21日
NLP 语料分类不均衡/数据倾斜/data skew
摘要: 数据层面: 过抽样 直接复制,即不断复制类别样本数少的类别样本。 插值法:通过对样本归一化,采样,求得样本分布,极值,均值等,然后根据样本分布,极值,均值来生成新样本来扩充样本数目。 欠抽样: 直接删除,随机减少多数类样本的数量。 算法层面: Weighted loss function,一个处理非
阅读全文
posted @ 2019-11-21 22:22 SENTIMENT_SONNE
阅读(619)
评论(0)
推荐(0)
2019年11月10日
Softmax函数与交叉熵
摘要: 一般在神经网络中, softmax可以作为分类任务的输出层。 输出n个类别选取的概率,并且概率和为1。 i代表的是第i个神经元的输出,zi是下面 loss function表示的是真实值与网络的估计值的误差。交叉熵的函数是这样的 yi表示真实的分类结果。 求导。首先,我们要明确一下我们要求什么,
阅读全文
posted @ 2019-11-10 16:49 SENTIMENT_SONNE
阅读(190)
评论(0)
推荐(0)
2019年11月6日
tf serving
摘要: 我们平时使用tf.Saver()保存的模型是checkpoint格式的, # construct graph! ... # add save/restore ops saver = tf.train.Saver() ... # save after training save_path = save
阅读全文
posted @ 2019-11-06 14:13 SENTIMENT_SONNE
阅读(361)
评论(0)
推荐(0)
2019年11月1日
pandas 技巧
摘要: find index of top 3 largest values of each column: df1.apply(lambda s: pd.Series(s.nlargest(3).index)) map dataframe column df["ItemIdx"] = df["questi
阅读全文
posted @ 2019-11-01 10:57 SENTIMENT_SONNE
阅读(189)
评论(0)
推荐(0)
2019年10月13日
MacOS+miniconda+theano安装(tensorflow)
摘要: brew update --debug --verbose brew install wget xcode-select --install 以上都不行 Error: No such file or directory @ dir_chdir - /usr/local/Cellar 卸载重装homw
阅读全文
posted @ 2019-10-13 23:20 SENTIMENT_SONNE
阅读(477)
评论(0)
推荐(0)
2019年10月8日
pytorch(1)--basics
摘要: 反向传播的一个手算例子:https://blog.csdn.net/weixin_38347387/article/details/82936585 这里主要是靠这个文章学的pytorch:https://www.jianshu.com/p/52684285e335 我们首先使用 numpy 来实现
阅读全文
posted @ 2019-10-08 17:30 SENTIMENT_SONNE
阅读(189)
评论(0)
推荐(0)
2019年9月29日
Tensorflow - 使用
摘要: batch size的设置经验: batch_size=1的极端,每次修正方向取决于单个样本,横冲直撞难以收敛。合理范围增大batch size,提高内存利用率,跑完一次epoch所需迭代次数减少。但是不能盲目增大,因为会内存溢出,想要达到相同精度训练时间变长,batchsize增加到一定程度,其确
阅读全文
posted @ 2019-09-29 13:05 SENTIMENT_SONNE
阅读(209)
评论(0)
推荐(0)
2019年9月24日
spark调优总结1:内存溢出处理及优化
摘要: https://blog.csdn.net/zuolovefu/article/details/79024899 https://www.cnblogs.com/stillcoolme/p/10576563.html
阅读全文
posted @ 2019-09-24 12:55 SENTIMENT_SONNE
阅读(300)
评论(0)
推荐(0)
2019年9月23日
TensorFlow macOS
摘要: open new project,选择interpreter:/Users/jingyuli/miniconda3/envs/tf/bin/python3.5 安装新的api: conda-env list source activate tf pip install gensim pip inst
阅读全文
posted @ 2019-09-23 13:12 SENTIMENT_SONNE
阅读(123)
评论(0)
推荐(0)
2019年9月22日
【windows+pycharm安装tensorflow】
摘要: 先anaconda open anaconda prompt $ conda create -n tensorflow python=3.5 确保名叫tensorflow的环境已经被成功添加:conda info --envs $ activate tensorflow. $ conda insta
阅读全文
posted @ 2019-09-22 19:50 SENTIMENT_SONNE
阅读(565)
评论(0)
推荐(0)
上一页
1
2
3
4
下一页
公告