papering - 博客园

2017年10月13日

对应于算法原型中的“纸条”

摘要： zookeeper 通过共享存储实现进程通信而非直接通过网络信息交换阅读全文

posted @ 2017-10-13 23:28 papering 阅读(181) 评论(0) 推荐(0)

Hive 实际上对于所存储的文件的完整性以及数据内容是否和表结构一致无支配力

摘要：数据位于hdfs路径下 load data into Table t1 load 执行的是复制文件的操作 create Table partitioned by () 创建了分区目录阅读全文

posted @ 2017-10-13 22:44 papering 阅读(522) 评论(0) 推荐(0)

kettle

摘要： kettle——shim——Hadoop 阅读全文

posted @ 2017-10-13 22:20 papering 阅读(166) 评论(0) 推荐(0)

regularexpression_action

摘要： re.compile('"ssid":"[^"]*"}',re.MULTILINE) re.compile('"ssid":"[^"]*"}',re.MULTILINE) 阅读全文

posted @ 2017-10-13 21:11 papering 阅读(978) 评论(0) 推荐(0)

Consumer Group Example

摘要：面向kafka编程 Consumer Group Example https://cwiki.apache.org/confluence/display/KAFKA/Consumer+Group+Example The ‘zookeeper.session.timeout.ms’ is how ma 阅读全文

posted @ 2017-10-13 12:59 papering 阅读(298) 评论(0) 推荐(0)

Neural Task Programming: Learning to Generalize Across Hierarchical Tasks

摘要： Neural Task Programming: Learning to Generalize Across Hierarchical Tasks 阅读全文

posted @ 2017-10-13 12:54 papering 阅读(390) 评论(0) 推荐(0)

dm层集市层四层 Build a multi-level data strategy 数据引入层（ODS，Operation Data Store）、数据公共层（CDM，Common Data Model）和数据应用层（ADS，Application Data Service）

摘要：数仓分层介绍及架构_大数据开发治理平台 DataWorks(DataWorks)-阿里云帮助中心 https://help.aliyun.com/zh/dataworks/use-cases/data-layer 在阿里巴巴的数据体系中，我们建议将数据仓库分为三层，自下而上为：数据引入层（ODS，O 阅读全文

posted @ 2017-10-13 12:11 papering 阅读(1525) 评论(0) 推荐(0)

图片服务器 sns 加爬虫免上云

摘要：借鸡下蛋阅读全文

posted @ 2017-10-13 02:05 papering 阅读(234) 评论(0) 推荐(0)

不等式放缩维时间戳是数据仓库无时间维度的事实表的灾难度表事实表

摘要：事实聚合计算维度层次关系事实通常是数字型阅读全文

posted @ 2017-10-13 00:12 papering 阅读(310) 评论(0) 推荐(0)

2017年10月12日

MaLoc: a practical magnetic fingerprinting approach to indoor localization using smartphones

摘要： https://www.indooratlas.com/ MaLoc: a practical magnetic fingerprinting approach to indoor localization using smartphones MaLoc: a practical magnetic 阅读全文

posted @ 2017-10-12 10:57 papering 阅读(458) 评论(0) 推荐(0)

Magnetic Fingerprinting Approach to Indoor Localization

摘要： Magnetic Fingerprinting Approach to Indoor Localization 阅读全文

posted @ 2017-10-12 08:54 papering 阅读(220) 评论(0) 推荐(0)

偏函数应用 pfa

摘要：阅读全文

posted @ 2017-10-12 03:01 papering 阅读(165) 评论(0) 推荐(0)

岭回归是连续型的主成分回归

摘要：阅读全文

posted @ 2017-10-12 02:02 papering 阅读(232) 评论(0) 推荐(0)

局部敏感函数的放大处理

摘要：阅读全文

posted @ 2017-10-12 01:16 papering 阅读(187) 评论(0) 推荐(0)

2017年10月11日

惯性导航

摘要：定位阅读全文

posted @ 2017-10-11 23:20 papering 阅读(190) 评论(0) 推荐(0)

航迹推算

摘要：定位阅读全文

posted @ 2017-10-11 23:19 papering 阅读(210) 评论(0) 推荐(0)

地磁场

摘要：定位阅读全文

posted @ 2017-10-11 23:12 papering 阅读(256) 评论(0) 推荐(0)

Optimizer in SQL - Catalyst Optimizer in Spark SQL

摘要： SELECT sum(v) FROM ( SELECT score.id, 100+80+score.math_score+ score.english_score AS v FROM people JOIN score WHERE people.id = score.id AND people.a 阅读全文

posted @ 2017-10-11 20:26 papering 阅读(237) 评论(0) 推荐(0)

社交网络营销对象选择

摘要：阅读全文

posted @ 2017-10-11 19:17 papering 阅读(156) 评论(0) 推荐(0)

Louvain Modularity Fast unfolding of communities in large networks

摘要： Louvain Modularity Fast unfolding of communities in large networks https://arxiv.org/pdf/0803.0476.pdf 【一些算法的思路都很简单；但是数学翻译是严谨的】【0-全局模块度,原始模块度，全局目标函阅读全文

posted @ 2017-10-11 17:34 papering 阅读(547) 评论(0) 推荐(0)

PCA tries to preserve linear structure, MDS tries to preserve global geometry, and t-SNE tries to preserve topology (neighborhood structure)

摘要： https://colah.github.io/posts/2014-10-Visualizing-MNIST/ 阅读全文

posted @ 2017-10-11 16:37 papering 阅读(192) 评论(0) 推荐(0)

维度建模高效性

摘要：阅读全文

posted @ 2017-10-11 13:07 papering 阅读(162) 评论(0) 推荐(0)

chunk

摘要：【为了寻找chunk 文件块】为了寻找某个文件的文件块，存在另一个称为master node 主节点或name node 名字节点的小文件为该文件所用。阅读全文

posted @ 2017-10-11 00:59 papering 阅读(400) 评论(0) 推荐(0)

机架故障

摘要：单节点故障单机架故障阅读全文

posted @ 2017-10-11 00:47 papering 阅读(229) 评论(0) 推荐(0)

分布式底层上层

摘要：分布式底层的一方面：软件栈下层的文件系统分布式上层的一种形式：SQL的某种实现阅读全文

posted @ 2017-10-11 00:42 papering 阅读(250) 评论(0) 推荐(0)

power law 幂定律

摘要： y=cx∧a 卖品销量排名与销量阅读全文

posted @ 2017-10-11 00:23 papering 阅读(207) 评论(0) 推荐(0)

2017年10月10日

visio_action

摘要： bug 沟通效率不能为负值！！ https://blogs.office.com/en-us/2012/11/05/containers-and-callouts-in-visio/?eu=true visio-document——subprocess callouts 【start/end dec 阅读全文

posted @ 2017-10-10 17:35 papering 阅读(259) 评论(0) 推荐(0)

Asynchronous_method_invocation 异步方法调用让步 yielding

摘要： zh.wikipedia.org/wiki/同步【同步不同事件发生时间一致】同步（英语：Synchronization），指在一个系统中所发生的事件（event），之间进行协调，在时间上出现一致性与统一化的现象。在系统中进行同步，也被称为及时（in time）、同步化的（synchronous 阅读全文

posted @ 2017-10-10 01:08 papering 阅读(378) 评论(0) 推荐(0)

Python解释器是单线程应用 IO 密集型计算密集型 GIL global interpreter lock 线程状态和全局解释器锁引用计数内存管理纤程安全原子

摘要： Frequently Asked Questions — PyPy documentation https://doc.pypy.org/en/latest/faq.html#does-pypy-have-a-gil-why PEP 703 – Making the Global Interpret 阅读全文

posted @ 2017-10-10 00:42 papering 阅读(275) 评论(0) 推荐(0)

2017年10月9日

going

摘要：阅读全文

posted @ 2017-10-09 18:57 papering 阅读(180) 评论(0) 推荐(0)

Chernoff-Hoeffding inequality -- Chernoff bounds, and some applications

摘要： https://www.cs.utah.edu/~jeffp/teaching/cs5955/L3-Chern-Hoeff.pdf 【大数据-通过随机过程降维】 When dealing with modern big data sets, a very common theme is reduc 阅读全文

posted @ 2017-10-09 15:15 papering 阅读(513) 评论(0) 推荐(0)

Jaccard Similarity and Shingling

摘要： https://www.cs.utah.edu/~jeffp/teaching/cs5955/L4-Jaccard+Shingle.pdf https://www.cs.utah.edu/~jeffp/teaching/cs5955/L5-Minhash.pdf 【可测空间 convert the 阅读全文

posted @ 2017-10-09 14:23 papering 阅读(399) 评论(0) 推荐(0)

Locality-sensitive hashing Pr[m(Si) = m(Sj )] = E[JSˆ (Si, Sj )] = JS(Si, Sj )

摘要： A hash function that maps names to integers from 0 to 15. There is a collision between keys "John Smith" and "Sandra Dee".、、 A minimal perfect hash fu 阅读全文

posted @ 2017-10-09 11:34 papering 阅读(558) 评论(0) 推荐(0)

2017年10月7日

Software-defined networking

摘要： Software-defined networking administrators to programmatically initialize, control, change, and manage network behavior dynamically via open interface 阅读全文

posted @ 2017-10-07 20:15 papering 阅读(241) 评论(0) 推荐(0)

多项式回归仍是线性回归

摘要：阅读全文

posted @ 2017-10-07 09:34 papering 阅读(251) 评论(0) 推荐(0)

2017年10月5日

Aspect Oriented Programming

摘要： Aspect Oriented Programming 阅读全文

posted @ 2017-10-05 18:37 papering 阅读(186) 评论(0) 推荐(0)

2017年10月3日

ExpandRank

摘要： ExpandRank 阅读全文

posted @ 2017-10-03 18:55 papering 阅读(314) 评论(0) 推荐(0)

2017年9月30日

flash 搜索算法

摘要： flash 阅读全文

posted @ 2017-09-30 21:19 papering 阅读(289) 评论(0) 推荐(0)

小波分析

摘要： https://en.wikipedia.org/wiki/Wavelet For example, a wavelet could be created to have a frequency of Middle C and a short duration of roughly a 32nd n 阅读全文

posted @ 2017-09-30 19:14 papering 阅读(266) 评论(0) 推荐(0)

Generalised Policy Iteration With Monte-Carlo Evaluation

摘要： http://www0.cs.ucl.ac.uk/staff/d.silver/web/Teaching_files/control.pdf 阅读全文

posted @ 2017-09-30 19:08 papering 阅读(198) 评论(0) 推荐(0)