摘要: Spark Streaming接收Kafka数据存储到Hbasefly spark hbase kafka主要参考了这篇文章https://yq.aliyun.com/articles/60712([点我])(https://yq.aliyun.com/articles/60712), 不过这篇文章使用的spark貌似是spark1.x的。我这里主要是改为了spark2.x的方式 kafka生...阅读全文
posted @ 2018-12-28 16:44 突然想起她的名字 阅读(51) 评论(0) 编辑
摘要: CNN的计算方式: w1 = (w - F_w + 2p) / s_w + 1 h1 = (h - F_h + 2p) / s_h + 1 其中 w, h 分别为上一层的宽高, Filters(kernel)的大小为 F_w, F_h strides 步长为: s_w, s_h p 为padding阅读全文
posted @ 2018-02-05 12:27 突然想起她的名字 阅读(134) 评论(0) 编辑
摘要: 用于改善质量、稳定性和多样性的可增长式GANGANsNVIDIA Flyreal or fake ?real or fake ?1024 x 1024 images generated using the CELEBA-HQ dataset 来源 论文:Progressive Growing of GANs for Improved Quality, Stability, and Varia...阅读全文
posted @ 2017-12-08 22:27 突然想起她的名字 阅读(230) 评论(0) 编辑
摘要: keras 与tensorflow 混合使用 keras 与tensorflow 混合使用 tensorfow Fly keras 最近tensorflow更新了新版本,到1.4了。做了许多更新,当然重要的是增加了tf.keras. 毕竟keras对于模型搭建的方便大家都是有目共睹的。 喜欢kera阅读全文
posted @ 2017-12-04 18:30 突然想起她的名字 阅读(10086) 评论(0) 编辑
摘要: 卷积神经网络入门CNN fly 多层卷积网络的基本理论卷积神经网络(Convolutional Neural Network,CNN) 是一种前馈神经网络, 它的人工神经元可以响应一部分覆盖范围内的周围单元,对于大型图像处理有出色表现。它包括卷积层(alternating convolutional layer)和池层(pooling layer)。多层卷积网络的基本可以参看下面这篇博文。Co...阅读全文
posted @ 2017-10-19 10:38 突然想起她的名字 阅读(1682) 评论(0) 编辑
摘要: Linux ShellShellLinux入门变量输入、输出重定向tr命令特殊文件 入门 变量和java、C等一样,变量的命名,允许下划线和字母开头的中间可以加入数字的命名规则。而读取变量是需要加 $ 符号才能使用. myvar="hello world" echo $myvar 输入、输出重定向符号解释>输出重定向>>输出重定向(追加) echo "string" > fil...阅读全文
posted @ 2017-10-19 10:36 突然想起她的名字 阅读(200) 评论(0) 编辑
摘要: 使用Keras编写GAN的入门GANTime: 2017-5-31前言代码reference 前言主要参考了网页[1]的教程,同时主要算法来自Ian J. Goodfellow 的论文,算法如下:gan 代码%matplotlib inlineimport numpy as npimport pandas as pdfrom keras.models import Modelfrom ker...阅读全文
posted @ 2017-10-19 10:34 突然想起她的名字 阅读(4169) 评论(2) 编辑
摘要: Wasserstein距离 和 Lipschitz连续FlyTime: 2017-5-31前言Wasserstein DistanceLipschitzreference 前言由于最近要看Wasserstein GAN 和 LS-GAN,前者用到了 Earth-Mover距离(Wasserstein),后者假定了Lipschitz连续。所以就打算把这两者的概念搞清楚一下。以此作为笔记。 Wa...阅读全文
posted @ 2017-10-19 10:32 突然想起她的名字 阅读(1847) 评论(0) 编辑
摘要: keras与sklearn的结合使用新建模板FlyTime: 2017-4-14引言代码 引言众所周知,keras目前没有提供交叉验证的功能,我们要向使用交叉验证,就需要与sklearn结合。keras也提供了这样的包装接口。keras.wrappers.scikit_learn通过这个包里面的KerasClassifier或者KerasRegressor就可以结合。闲话少叙,上代码。 代码...阅读全文
posted @ 2017-10-19 10:31 突然想起她的名字 阅读(1887) 评论(0) 编辑
摘要: keras与tensorboard结合使用新建模板FlyTime: 2017-4-6众所周知,tensorflow虽然功能非常强大,但是确实不好用,有点反人类的样子。所以才有了keras的出现。非常容易上手,便捷使用。但是要想查看keras的log日志又不是非常方便。这就有了与tensorboard结果来方便查看的想法。下面是记录了最通用的tensorboard结合的方式:from keras....阅读全文
posted @ 2017-10-19 10:30 突然想起她的名字 阅读(5914) 评论(0) 编辑