随笔分类 -  处理数据（转载）

深度学习对抗样本的八个误解与事实
该文被密码保护。
posted @ 2015-07-29 20:32 菜鸡一枚 阅读(0) 评论(0) 推荐(0) 编辑
深度学习之对抗样本问题
摘要：深度学习之对抗样本问题2006 年，Geoffrey Hinton 提出了深度学习。受益于大数据的出现和大规模计算能力的提升，深度学习已然成为最活跃的计算机研究领域之一。深度学习的多层非线性结构使其具备强大的特征表达能力和对复杂任务的建模能力。最近几年，深度学习的发展也带动了一系列的研究。尤其是在图... 阅读全文
posted @ 2015-07-29 20:03 菜鸡一枚 阅读(2621) 评论(0) 推荐(0) 编辑
浅谈Feature Scaling
摘要：浅谈FeatureScaling定义：Feature scaling is a method used to standardize the range of independent variables or features of data. In data processing, it is a... 阅读全文
posted @ 2015-07-22 21:32 菜鸡一枚 阅读(431) 评论(0) 推荐(0) 编辑
数据归一化和两种常用的归一化方法
摘要：数据归一化和两种常用的归一化方法数据标准化（归一化）处理是数据挖掘的一项基础工作，不同评价指标往往具有不同的量纲和量纲单位，这样的情况会影响到数据分析的结果，为了消除指标之间的量纲影响，需要进行数据标准化处理，以解决数据指标之间的可比性。原始数据经过数据标准化处理后，各指标处于同一数量级，适合进行综... 阅读全文
posted @ 2015-07-22 21:26 菜鸡一枚 阅读(522) 评论(0) 推荐(0) 编辑
Seven Python Tools All Data Scientists Should Know How to Use
摘要：Seven Python Tools All Data Scientists Should Know How to UseIf you’re an aspiring data scientist, you’re inquisitive – always exploring, learning, an... 阅读全文
posted @ 2015-07-16 20:10 菜鸡一枚 阅读(332) 评论(0) 推荐(0) 编辑
Python/Numpy大数据编程经验
摘要：Python/Numpy大数据编程经验1.边处理边保存数据，不要处理完了一次性保存。不然程序跑了几小时甚至几天后挂了，就啥也没有了。即使部分结果不能实用，也可以分析程序流程的问题或者数据的特点。2. 及时用 del 释放大块内存。Python缺省是在变量范围（variablescope）之外才释放一... 阅读全文
posted @ 2015-07-16 19:56 菜鸡一枚 阅读(1484) 评论(0) 推荐(0) 编辑
什么是高大上的数据分析方法？
摘要：什么是高大上的数据分析方法？作者：黄成明 出处：微信公众号_数据化管理（sjhglwx）经常收到一些毕业两三年的朋友来信，这是一个迷茫的时期。他们在大学学的是各种高大上的数据分析方法，但实际工作中却是干一些只需要加加减减的统计工作。他们有理想，想赶出一番自己的事业，想挖出另一个“啤酒与尿不湿”（注：... 阅读全文
posted @ 2015-07-07 21:21 菜鸡一枚 阅读(977) 评论(0) 推荐(0) 编辑
预处理方法
该文被密码保护。
posted @ 2015-07-05 16:05 菜鸡一枚 阅读(3) 评论(0) 推荐(0) 编辑
转：char*, char[] ,CString, string的转换
摘要：转：char*, char[] ,CString, string的转换(一) 概述string和CString均是字符串模板类，string为标准模板类（STL）定义的字符串类，已经纳入C++标准之中；CString（typedef CStringT > CString）为Visual C++中最常... 阅读全文
posted @ 2015-07-05 15:58 菜鸡一枚 阅读(375) 评论(0) 推荐(0) 编辑
机器学习中的数据清洗与特征处理综述
摘要：机器学习中的数据清洗与特征处理综述随着美团交易规模的逐步增大，积累下来的业务数据和交易数据越来越多，这些数据是美团做为一个团购平台最宝贵的财富。通过对这些数据的分析和挖掘，不仅能给美团业务发展方向提供决策支持，也为业务的迭代指明了方向。目前在美团的团购系统中大量地应用到了机器学习和数据挖掘技术，例如... 阅读全文
posted @ 2015-07-01 19:50 菜鸡一枚 阅读(462) 评论(0) 推荐(0) 编辑
数据预处理方法总结
该文被密码保护。
posted @ 2015-06-26 11:58 菜鸡一枚 阅读(3) 评论(0) 推荐(0) 编辑
python读取mnist
摘要：python读取mnist其实就是python怎么读取binnary filemnist的结构如下，选取train-imagesTRAINING SET IMAGE FILE (train-images-idx3-ubyte):[offset] [type] [value] [description... 阅读全文
posted @ 2015-06-15 21:49 菜鸡一枚 阅读(2768) 评论(0) 推荐(1) 编辑
（五）乱入之如何使用MNIST数据库
摘要：（五）乱入之如何使用MNIST数据库今天花了整整一天时间查各种资料，终于搞清楚了怎么使用MNIST数据库。哈哈，MNIST，是不是高端洋气上档次？是不是不知道是什么东东？MNIST是一个据说很出名的手写数字数据库，据说是美国中学生手写的数字，说实话大部分都写得挺丑的。。。Anyway，幸好能看得懂是... 阅读全文
posted @ 2015-06-15 21:39 菜鸡一枚 阅读(13856) 评论(0) 推荐(2) 编辑