papering - 博客园

2017年12月1日

摘要： To verify Hadoop releases using GPG http://hadoop.apache.org/releases.html To verify Hadoop releases using GPG: To perform a quick check using SHA-256 阅读全文

posted @ 2017-12-01 14:16 papering 阅读(527) 评论(0) 推荐(0)

Cluster Mode Overview

摘要： https://spark.apache.org/docs/latest/cluster-overview.html 阅读全文

posted @ 2017-12-01 13:41 papering 阅读(163) 评论(0) 推荐(0)

Trie 前缀树或字典树确定有限状态自动机

摘要： https://leetcode.cn/problems/QC3q1f/ https://zh.wikipedia.org/wiki/Trie 应用 trie树常用于搜索提示。如当输入一个网址，可以自动搜索出可能的选择。当没有完全匹配的搜索结果，可以返回前缀最相似的可能。[4] 实现方式 trie树阅读全文

posted @ 2017-12-01 12:13 papering 阅读(866) 评论(0) 推荐(0)

Searching Algorithms 搜索

摘要： Searching Algorithms - GeeksforGeeks https://www.geeksforgeeks.org/searching-algorithms/ 搜索复制阅读全文

posted @ 2017-12-01 10:58 papering 阅读(451) 评论(0) 推荐(0)

mongo-spark 安装排故 ./sbt check

摘要： mongodb/mongo-spark: The MongoDB Spark Connector https://github.com/mongodb/mongo-spark ./sbt check 报错后控制台提示没有权限 ps -aux | grep mongo; 杀死需要权限认证的mongo 阅读全文

posted @ 2017-12-01 09:41 papering 阅读(969) 评论(0) 推荐(0)

纯虚函数对 C++ 程序员的提示：Python 中所有的方法实际上都是 virtual 方法。

摘要： 9. 类 — Python 3.11.3 文档 https://docs.python.org/zh-cn/3/tutorial/classes.html class DerivedClassName(modname.BaseClassName): 派生类定义的执行过程与基类相同。当构造类对象时，阅读全文

posted @ 2017-12-01 08:24 papering 阅读(586) 评论(0) 推荐(0)

a

摘要： a 搜索复制阅读全文

posted @ 2017-12-01 08:13 papering 阅读(127) 评论(0) 推荐(0)

对象引用的强制类型转换

摘要： manger 阅读全文

posted @ 2017-12-01 08:07 papering 阅读(188) 评论(0) 推荐(0)

2017年11月30日

lazy

摘要： http://www.scala-lang.org/blog/2017/11/28/view-based-collections.html 阅读全文

posted @ 2017-11-30 23:24 papering 阅读(138) 评论(0) 推荐(0)

the hard problems when writing a great connector; type cohersion, data partitioning and data locality to name a few

摘要： http://rosslawley.co.uk/introducing-a-new=mongodb-spark-connector/ 阅读全文

posted @ 2017-11-30 23:02 papering 阅读(161) 评论(0) 推荐(0)

JDK and JRE File Structure JAVA_HOME HotSpot优化技术

摘要： https://docs.oracle.com/javase/8/docs/technotes/tools/windows/jdkfiles.html Java Platform, Standard Edition Tools ReferenceContents Previous Next 3 JD 阅读全文

posted @ 2017-11-30 22:23 papering 阅读(349) 评论(0) 推荐(0)

inheritance super overrides printMethod in Superclass override重写父方法

摘要： Core Java Web Page http://horstmann.com/corejava.html [ inheritance ] super Using the Keyword super (The Java™ Tutorials > Learning the Java Language 阅读全文

posted @ 2017-11-30 20:23 papering 阅读(403) 评论(0) 推荐(0)

Java programming language compiler

摘要： https://docs.oracle.com/javase/7/docs/technotes/tools/windows/javac.html\ javac - Java programming language compiler javac - Java programming language 阅读全文

posted @ 2017-11-30 19:32 papering 阅读(248) 评论(0) 推荐(0)

passive aggressive(pa)和average perceptron(ap)

摘要： passive aggressive(pa)和average perceptron(ap) 阅读全文

posted @ 2017-11-30 15:53 papering 阅读(331) 评论(0) 推荐(0)

字典合并

摘要： merge two dicts Python 3.6.4 >>> x={'a':1,'b':2}>>> y={'b':3,'c':4}>>> z={**x,**y}>>> z{'a': 1, 'b': 3, 'c': 4}>>> z={**y,**x}>>> z{'b': 2, 'c': 4, 'a 阅读全文

posted @ 2017-11-30 14:15 papering 阅读(204) 评论(0) 推荐(0)

pickle pyarrow

摘要： http://arrow.apache.org/blog/ 阅读全文

posted @ 2017-11-30 12:37 papering 阅读(293) 评论(0) 推荐(0)

Serialization and deserialization are bottlenecks in parallel and distributed computing, especially in machine learning applications with large objects and large quantities of data.

摘要： Serialization and deserialization are bottlenecks in parallel and distributed computing, especially in machine learning applications with large object 阅读全文

posted @ 2017-11-30 12:03 papering 阅读(174) 评论(0) 推荐(0)

Introduction to the Standard Directory Layout

摘要：这样就可以在pom中依赖引用了： Introduction to the Standard Directory Layout Having a common directory layout would allow for users familiar with one Maven project 阅读全文

posted @ 2017-11-30 07:38 papering 阅读(208) 评论(0) 推荐(0)

2017年11月29日

com.mongodb. org.mongodb.

摘要：阅读全文

posted @ 2017-11-29 20:47 papering 阅读(149) 评论(0) 推荐(0)

import 原理及导入自定义、第三方包

摘要： import 阅读全文

posted @ 2017-11-29 18:56 papering 阅读(207) 评论(0) 推荐(0)

403 'Forbidden'

摘要：如果您是网站管理员点击这里查看详情 client: 211.161.60.12, server: d171d61, time: 2017-11-29 15:17:22 [80001] 阅读全文

posted @ 2017-11-29 15:21 papering 阅读(568) 评论(0) 推荐(0)

https://bitbucket.org/ariya/phantomjs/downloads/phantomjs-2.1.1-linux-x86_64.tar.bz2

摘要： https://bitbucket.org/ariya/phantomjs/downloads/phantomjs-2.1.1-linux-x86_64.tar.bz2 阅读全文

posted @ 2017-11-29 14:06 papering 阅读(2722) 评论(0) 推荐(0)

These interactions can be expressed as complicated, large scale graphs. Mining data requires a distributed data processing engine

摘要： https://databricks.com/blog/2014/08/14/mining-graph-data-with-spark-at-alibaba-taobao.html 阅读全文

posted @ 2017-11-29 12:15 papering 阅读(193) 评论(0) 推荐(0)

2017年11月28日

vim 格式化代码

摘要： gg shift+v shift+g = 阅读全文

posted @ 2017-11-28 17:43 papering 阅读(118) 评论(0) 推荐(0)

mvn archetype

摘要： mvn archetype 阅读全文

posted @ 2017-11-28 16:01 papering 阅读(142) 评论(0) 推荐(0)

bash_action

摘要：通过进程号进入工作目录使用pwdx命令，这是最简单的方法，提供进程号，该命令就可以返回进程的工作目录。 pwdx 1312813128: /home/image/tianyi_to_biz pwdx 13128 | awk '{print $2}'/home/image/tianyi_to_biz 阅读全文

posted @ 2017-11-28 07:48 papering 阅读(551) 评论(0) 推荐(0)

mvn 管理 scala

摘要： scala 阅读全文

posted @ 2017-11-28 04:03 papering 阅读(126) 评论(0) 推荐(0)

mvn_action

摘要： Maven 仓库 | 菜鸟教程 https://www.runoob.com/maven/maven-repositories.html mvn jar 包加入时间戳实践：<version>${maven.build.timestamp}-SNAPSHOT</version><maven.bui 阅读全文

posted @ 2017-11-28 00:32 papering 阅读(180) 评论(0) 推荐(0)

2017年11月27日

mongo-java-driver

摘要： http://mvnrepository.com/artifact/org.mongodb/mongo-java-driver/3.5.0 阅读全文

posted @ 2017-11-27 23:53 papering 阅读(300) 评论(0) 推荐(0)

2017年11月26日

Linux下编译安装源码包软件 configure ,make, make install, make test/check, make clean 假目标

摘要： http://www.360doc7.net/wxarticlenew/541275971.html 一、程序的组成部分 Linux下程序大都是由以下几部分组成：二进制文件：也就是可以运行的程序文件库文件：就是通常我们见到的lib目录下的文件配置文件：这个不必多说，都知道帮助文档：通常是我们阅读全文

posted @ 2017-11-26 23:04 papering 阅读(4132) 评论(0) 推荐(0)

编译spark源码 Maven 、SBT 2种方式编译

摘要：由于实际环境较为复杂，从Spark官方下载二进制安装包可能不具有相关功能或不支持指定的软件版本，这就需要我们根据实际情况编译Spark源代码，生成所需要的部署包。 Spark可以通过Maven和SBT两种方式进行编译，再通过make-distribution.sh脚本生成部署包 Maven方式编译需阅读全文

posted @ 2017-11-26 09:53 papering 阅读(341) 评论(0) 推荐(0)

ES-Hadoop

摘要： ES-Hadoop 阅读全文

posted @ 2017-11-26 01:16 papering 阅读(129) 评论(0) 推荐(0)

多线程上下文切换诱因

摘要： 11. 标准库简介 —— 第二部分 — Python 3.11.3 文档 https://docs.python.org/zh-cn/3/tutorial/stdlib2.html 线程是一种对于非顺序依赖的多个任务进行解耦的技术。多线程可以提高应用的响应效率，当接收用户输入的同时，保持其他任务在后阅读全文

posted @ 2017-11-26 00:29 papering 阅读(622) 评论(0) 推荐(0)

用户态切换到内核态的3种方式

摘要： https://baike.baidu.com/item/核心态/6845908 在处理器的存储保护中，主要有两种权限状态，一种是核心态（管态），也被称为特权态；一种是用户态（目态）。核心态是操作系统内核所运行的模式，运行在该模式的代码，可以无限制地对系统存储、外部设备进行访问。中文名核心态又称阅读全文

posted @ 2017-11-26 00:19 papering 阅读(4423) 评论(0) 推荐(0)

2017年11月25日

vim_action

摘要： gg 到首行第一个非空白字符处 :$ 到尾行第一个非空白字符处 dG 删除全部 VI中的多行删除与复制 - CSDN博客 http://blog.csdn.net/wallwind/article/details/7633356 复制多行 23,34 co 78 将23-34行的复制到78行 :23 阅读全文

posted @ 2017-11-25 20:54 papering 阅读(198) 评论(0) 推荐(0)

import date

摘要： date 阅读全文

posted @ 2017-11-25 14:02 papering 阅读(196) 评论(0) 推荐(0)

__sizeof__()

摘要： https://bugs.python.org/issue2898 https://bugs.python.org/file10353/footprint.patch A new function, getsizeof(), takes a Python object and returns the 阅读全文

posted @ 2017-11-25 11:34 papering 阅读(316) 评论(0) 推荐(0)

classmethod staticmethod

摘要： decorator Glossary — Python 3.6.3 documentation https://docs.python.org/3/glossary.html decorator A function returning another function, usually appli 阅读全文

posted @ 2017-11-25 09:57 papering 阅读(217) 评论(0) 推荐(0)

Java对对象的引用不是引用调用而是按值引用 Java不存在引用调用

摘要： call by reference Java call by value 阅读全文

posted @ 2017-11-25 08:09 papering 阅读(252) 评论(0) 推荐(0)

多线程同步

摘要： w 阅读全文

posted @ 2017-11-25 00:10 papering 阅读(140) 评论(0) 推荐(0)