posted @ 2017-10-15 14:10
papering
阅读(156)
推荐(0)
posted @ 2017-10-15 13:10
papering
阅读(160)
推荐(0)
摘要:
spark 行动算子 TensorFlow
阅读全文
posted @ 2017-10-14 23:07
papering
阅读(224)
推荐(0)
摘要:
横向扩展(Scale Out) 与 纵向扩展(Scale Up) - kevin.gg - 博客园 https://www.cnblogs.com/problog/articles/2561440.html Scale Out 按字面意思是超过尺寸范围,而Scale Up则是按比例增高。即使用靠增加
阅读全文
posted @ 2017-10-14 22:38
papering
阅读(1179)
推荐(0)
posted @ 2017-10-14 13:20
papering
阅读(148)
推荐(0)
posted @ 2017-10-14 13:12
papering
阅读(144)
推荐(0)
摘要:
配置HDFS为可挂载后: 1-可挂载后才支持非完整POSIX语义; 2-仍然不支持随机写入,仍然为“一次写入,多次读取”; 3-可能误用,导致众多小文件; : 1-使用Solr存储和检索小文件; 2-使用HBase存储小文件,使用路径和文件名称做为键; 3-使用容器格式,如SequenceFiles
阅读全文
posted @ 2017-10-14 09:37
papering
阅读(244)
推荐(0)
摘要:
连接串 从节点列表本地缓存主节点对未分配的任务,随机分配给从节点(不合理??)从节点保存一个本地待执行任务列表单独的线程对节点已分配任务进行循环 进程p为了获锁——>创建节点znode_/lock且其为临时节点:/lock 临时节点 避免该znode崩溃而锁无法释放 https://zookeepe
阅读全文
posted @ 2017-10-14 08:30
papering
阅读(199)
推荐(0)
摘要:
脑裂 系统中两个或多个部分开始独立工作
阅读全文
posted @ 2017-10-13 23:51
papering
阅读(168)
推荐(0)
posted @ 2017-10-13 23:32
papering
阅读(256)
推荐(0)
posted @ 2017-10-13 23:31
papering
阅读(437)
推荐(0)
摘要:
zookeeper 通过共享存储实现进程通信 而非直接通过网络信息交换
阅读全文
posted @ 2017-10-13 23:28
papering
阅读(186)
推荐(0)
摘要:
数据位于hdfs路径下 load data into Table t1 load 执行的是复制文件的操作 create Table partitioned by () 创建了分区目录
阅读全文
posted @ 2017-10-13 22:44
papering
阅读(528)
推荐(0)
摘要:
kettle——shim——Hadoop
阅读全文
posted @ 2017-10-13 22:20
papering
阅读(173)
推荐(0)
摘要:
re.compile('"ssid":"[^"]*"}',re.MULTILINE) re.compile('"ssid":"[^"]*"}',re.MULTILINE)
阅读全文
posted @ 2017-10-13 21:11
papering
阅读(986)
推荐(0)
摘要:
面向kafka编程 Consumer Group Example https://cwiki.apache.org/confluence/display/KAFKA/Consumer+Group+Example The ‘zookeeper.session.timeout.ms’ is how ma
阅读全文
posted @ 2017-10-13 12:59
papering
阅读(304)
推荐(0)
摘要:
Neural Task Programming: Learning to Generalize Across Hierarchical Tasks
阅读全文
posted @ 2017-10-13 12:54
papering
阅读(393)
推荐(0)
摘要:
数仓分层介绍及架构_大数据开发治理平台 DataWorks(DataWorks)-阿里云帮助中心 https://help.aliyun.com/zh/dataworks/use-cases/data-layer 在阿里巴巴的数据体系中,我们建议将数据仓库分为三层,自下而上为:数据引入层(ODS,O
阅读全文
posted @ 2017-10-13 12:11
papering
阅读(1539)
推荐(0)
posted @ 2017-10-13 02:05
papering
阅读(239)
推荐(0)
摘要:
事实 聚合计算 维度 层次关系 事实 通常是数字型
阅读全文
posted @ 2017-10-13 00:12
papering
阅读(316)
推荐(0)
摘要:
https://www.indooratlas.com/ MaLoc: a practical magnetic fingerprinting approach to indoor localization using smartphones MaLoc: a practical magnetic
阅读全文
posted @ 2017-10-12 10:57
papering
阅读(460)
推荐(0)
摘要:
Magnetic Fingerprinting Approach to Indoor Localization
阅读全文
posted @ 2017-10-12 08:54
papering
阅读(223)
推荐(0)
posted @ 2017-10-12 03:01
papering
阅读(167)
推荐(0)
posted @ 2017-10-12 02:02
papering
阅读(238)
推荐(0)
posted @ 2017-10-12 01:16
papering
阅读(187)
推荐(0)
posted @ 2017-10-11 23:20
papering
阅读(196)
推荐(0)
posted @ 2017-10-11 23:19
papering
阅读(214)
推荐(0)
posted @ 2017-10-11 23:12
papering
阅读(261)
推荐(0)
摘要:
SELECT sum(v) FROM ( SELECT score.id, 100+80+score.math_score+ score.english_score AS v FROM people JOIN score WHERE people.id = score.id AND people.a
阅读全文
posted @ 2017-10-11 20:26
papering
阅读(245)
推荐(0)
posted @ 2017-10-11 19:17
papering
阅读(157)
推荐(0)
摘要:
Louvain Modularity Fast unfolding of communities in large networks https://arxiv.org/pdf/0803.0476.pdf 【一些算法的思路 都很简单 ;但是数学翻译是严谨的】 【0-全局模块度,原始模块度,全局目标函
阅读全文
posted @ 2017-10-11 17:34
papering
阅读(553)
推荐(0)
摘要:
https://colah.github.io/posts/2014-10-Visualizing-MNIST/
阅读全文
posted @ 2017-10-11 16:37
papering
阅读(201)
推荐(0)
posted @ 2017-10-11 13:07
papering
阅读(166)
推荐(0)
摘要:
【为了寻找chunk 文件块】 为了寻找某个文件的文件块,存在另一个称为master node 主节点或name node 名字节点的小文件为该文件所用。
阅读全文
posted @ 2017-10-11 00:59
papering
阅读(403)
推荐(0)
posted @ 2017-10-11 00:47
papering
阅读(232)
推荐(0)
摘要:
分布式底层的一方面:软件栈下层的文件系统 分布式上层的一种形式:SQL的某种实现
阅读全文
posted @ 2017-10-11 00:42
papering
阅读(253)
推荐(0)
摘要:
y=cx∧a 卖品销量排名与销量
阅读全文
posted @ 2017-10-11 00:23
papering
阅读(211)
推荐(0)
摘要:
bug 沟通效率不能为负值!! https://blogs.office.com/en-us/2012/11/05/containers-and-callouts-in-visio/?eu=true visio-document——subprocess callouts 【start/end dec
阅读全文
posted @ 2017-10-10 17:35
papering
阅读(264)
推荐(0)
摘要:
zh.wikipedia.org/wiki/同步 【同步不同事件发生 时间一致】 同步(英语:Synchronization),指在一个系统中所发生的事件(event),之间进行协调,在时间上出现一致性与统一化的现象。在系统中进行同步,也被称为及时(in time)、同步化的(synchronous
阅读全文
posted @ 2017-10-10 01:08
papering
阅读(391)
推荐(0)
摘要:
Frequently Asked Questions — PyPy documentation https://doc.pypy.org/en/latest/faq.html#does-pypy-have-a-gil-why PEP 703 – Making the Global Interpret
阅读全文
posted @ 2017-10-10 00:42
papering
阅读(289)
推荐(0)