随笔分类 -  Math/Statistical

摘要：http://www.sas.com/offices/asiapacific/china/success/cmb.html引入个贷评分卡机制，降低贷款风险——中国招商银行依托SAS数据分析技术领跑个贷市场中国招商银行是中国最具竞争力的银行之一。近几年，以敢于创新、善于创新著称的招行，结合中国的市场形势，加大个人业务的发展力度，个贷业务在产品创新、服务创新、技术创新等诸方面都因势而变，步入了高速发展的黄金时代。 2006年该行的个人贷款当年新增量占全国个人贷款增量的12%，截止到2006年底，招商银行成为国内第一家个人贷款余额突破1000亿元的股份制银行。面对快速增长的个贷业务以及不断变化的个贷 阅读全文

摘要：理解离散傅立叶变换（三） ------复数形式离散傅立叶变换复数形式的离散傅立叶变换非常巧妙地运用了复数的方法，使得傅立叶变换变换更加自然和简洁，它并不是只是简单地运用替换的方法来运用复数，而是完全从复数的角度来分析问题，这一点跟实数DFT是完全不一样的。一、把正余弦函数表示成复数的形式通过欧拉等式可以把正余弦函数表示成复数的形式：cos( x ) = 1/2 ej(-x)+ 1/2 ejxsin( x ) = j (1/2 ej(-x)- 1/2 ejx)从这个等式可以看出，如果把正余弦函数表示成复数后，它们变成了由正负频率组成的正余弦波，相反地，一个由正负频率组成的正余弦波，可以通过复数的 阅读全文

摘要：转自：http://blog.csdn.net/dznlong/article/details/2261150理解离散傅立叶变换（一） ------傅立叶变换的由来关于傅立叶变换，无论是书本还是在网上可以很容易找到关于傅立叶变换的描述，但是大都是些故弄玄虚的文章，太过抽象，尽是一些让人看了就望而生畏的公式的罗列，让人很难能够从感性上得到理解，最近，我偶尔从网上看到一个关于数字信号处理的电子书籍，是一个叫Steven W. Smith, Ph.D.外国人写的，写得非常浅显，里面有七章由浅入深地专门讲述关于离散信号的傅立叶变换，虽然是英文文档，我还是硬着头皮看完了有关傅立叶变换的有关内容，看了有茅 阅读全文

摘要：理解离散傅立叶变换（二） ------实数形式离散傅立叶变换（Real DFT）上一节我们看到了一个实数形式离散傅立叶变换的例子，通过这个例子能够让我们先对傅立叶变换有一个较为形象的感性认识，现在就让我们来看看实数形式离散傅立叶变换的正向和逆向是怎么进行变换的。在此，我们先来看一下频率的多种表示方法。一、频域中关于频率的四种表示方法1、序号表示方法，根据时域中信号的样本数取0 ~ N/2，用这种方法在程序中使用起来可以更直接地取得每种频率的幅度值，因为频率值跟数组的序号是一一对应的: X[k]，取值范围是0 ~ N/2；2、分数表示方法，根据时域中信号的样本数的比例值取0 ~ 0.5: X[ƒ 阅读全文

摘要：其实这个程序是很早以前写的，只是这两天有人问这个算法，就把程序翻出来，加上了详细的注释。程序很简单，就是从一个observations.txt的文件中读取数据，并把数据对象划分成若干个聚类。具体格式：前3行分别是数据数量、数据维度和聚类数量后面每行为一个数据比如：9342.1 3.0 10.04.0 5.2 -1.05.1 1.5 2.310.5 12.6 10.812.1 10.9 11.04.2 5.3 -9.85.4 1.6 8.7-1.0 -2.1 -0.90.5 0.3 0.4前三行分别表示有9个数据，数据的维度是3，分成是4个聚类。用这个数据运行后，程序打印出划分结果：---- 第 阅读全文

摘要：于数据分析的态度，有几句牢骚要发泄一下，纯属这几年工作的个人心里感受。面试后的感想这个周末我一直在面试，总共三十多人，只有一半能到我这一关，不管是工作了几年的，还是一点工作经验都没有的，不管是名牌大学的还是一般学校的，他们对数据的态度都让我有些失望。我问他们，假如我是京东商城的CEO，周一早上你要给我看上周的三个数据，你会选择什么数据？几乎所有的人没有1秒就回答，比如流量、转化率、交易量等。我接着问，你听清楚我的问题了吗，我说是给CEO看的。接着大部分人会倒抽口气说，也许CEO不会关注这么细节的数据，那应该是XXX数据了。接着我又问，我说的是上一周情况，你注意到“周”这个时间段吗？接着大部分人 阅读全文

摘要：找几个不错的Matlab资源。里面有不少需要的模型、方法，比如multifractal，貌似还有kriging，Kalman滤波。好东西不少，有时间得多看看。字数限制，只能分三次篇了。转自：http://www.baisi.net/thread-51930-1-3.htmlhttp://blog.hjenglish.com/rainy8758/articles/1337926.htmlhttp://zjm040186.blog.163.com/blog/static/3024899020087273225176/MATLAB Toolboxes＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝ 阅读全文

摘要：Hidden Markov model (HMM)一、马尔科夫转移矩阵法的涵义单个生产厂家的产品在同类商品总额中所占的比率，称为该厂产品的市场占有率。在激烈的竞争中，市场占有率随产品的质量、消费者的偏好以及企业的促销作用等因素而发生变化。企业在对产品种类与经营方向做出决策时，需要预测各种商品之间不断转移的市场占有率。 市场占有率的预测可采用马尔科夫转移矩阵法，也就是运用转移概率矩阵对市场占有率进行市场趋势分析的方法。马尔科夫是俄国数学家，他在20世纪初发现：一个系统的某些因素在转移中，第n次结果只受第n-1的结果影响，只与当前所处状态有关，与其他无关。比如：研究一个商店的累计销售额，如果现在时 阅读全文

摘要：简介：本文从介绍 SPSS 产品家族开始,将详细介绍 SPSS 数据挖掘套件的基本使用,数据挖掘的基本概念及其与 BI 和统计数据分析等概念的区别，作为工业界标准的数据挖掘标准流程 Crisp-DM 以及一些典型的数据挖掘算法。期望能够帮助从事相关工作的工程师和数据分析人员尽快建立使用 SPSS 进行数据挖掘的概念框架。Spass 发展历史SPSS 是著名的统计分析和数据挖掘软件，一直以来它和 SAS，BMDP 并称为最有影响力的三大统计分析软件。广泛应用于经济学、生物学、心理学、地理学、医疗卫生、体育、农业、林业、商业、金融等各个领域。SPSS 最早由斯坦福大学三位学生于 1968 年创建， 阅读全文

摘要：下面是Spectral Clustering 的一个简单的 Matlab 实现：function idx = spectral_clustering(W, k) D = diag(sum(W)); L = D-W; opt = struct('issym', true, 'isreal', true); [V dummy] = eigs(L, D, k, 'SM', opt); idx = kme... 阅读全文

摘要：本排名根据狄多涅的纯粹数学全貌和岩波数学百科全书，苏联出版的数学百科全书综合量化分析得出：1.A.N.Kolmogorov -----为概率论建立了公理体系的俄罗斯人。 2.H.Poincare -----H.庞加莱人类历史上最后一位全才科学家。 3.D.Hilbert -----号称数学之王，无数天才的老师。 4.A.E,Nother -----二十世纪代数学执牛耳者，诺特阿姨。 5.Von N... 阅读全文

摘要：有一段时间 google 的图标变成下面这个样子，很多人不明白，这是什么意思，其实这是为了纪念法国数学家Gston Julia是，他发现了在数论中有名的julia序列，就是在这个google LOGO上面看到的数学公式。通过这个数学公式可以在解析几何上实现很多不规则边的图形。学名叫作分形。我们在网上搜索了一些资料，为大家做一下分形这个 图形学上的概念普及。认识分形　　作为一门新兴学科，分形不但受到... 阅读全文

摘要：感觉数学似乎总是不够的。这些日子为了解决research中的一些问题，又在图书馆捧起了数学的教科书。从大学到现在，课堂上学的和自学的数学其实不算少了，可是在研究的过程中总是 发现需要补充新的数学知识。Learning和Vision都是很多种数学的交汇场。看着不同的理论体系的交汇，对于一个researcher来说，往往 是非常exciting的enjoyable的事情。不过，这也代表着要充分了解这个... 阅读全文

摘要：什么叫Spectral Algorithm?广义上来说，任何在演算法中用到SVD/特征值分解的，都叫Spectral Algorithm。 从很老很老的PCA/LDA，到比较近的Spectral Embedding/Clustering，都属于这类。为什么要用SVD/特征值分解? 其实并不是为用而用，而是不得不用。 目前在研究领域碰到的很多基础问题都是NP-hard的，找一个比较好的近似演算法... 阅读全文