摘要: 参考:https://www.jianshu.com/p/a32e518d0544 阅读全文
posted @ 2019-09-16 14:09 jqbai 阅读(108) 评论(0) 推荐(0) 编辑
摘要: https://github.com/haotian-wang/google-access-helper 阅读全文
posted @ 2019-09-09 00:29 jqbai 阅读(49) 评论(0) 推荐(0) 编辑
摘要: 关于es为什么搜索快,大家应该有所了解,但是到底什么是倒排索引?网上找到一篇介绍通俗易懂,转载如下: 见其名知其意,有倒排索引,对应肯定,有正向索引。 正向索引(forward index),反向索引(inverted index)更熟悉的名字是倒排索引。 在搜索引擎中每个文件都对应一个文件ID,文 阅读全文
posted @ 2019-08-28 01:22 jqbai 阅读(527) 评论(0) 推荐(0) 编辑
摘要: 官网地址:https://cwiki.apache.org/confluence/display/Hive/LanguageManual+WindowingAndAnalytics 转自:https://blog.csdn.net/wangpei1949/article/details/814375 阅读全文
posted @ 2019-08-27 18:57 jqbai 阅读(1119) 评论(0) 推荐(0) 编辑
摘要: Hadoop完全分布式集群搭建: 1)配置文件 1.hadoop-env.sh export JAVA_HOME=/opt/module/jdk1.8.0_171 export HDFS_NAMENODE_USER=root export HDFS_DATANODE_USER=root export 阅读全文
posted @ 2019-06-08 09:26 jqbai 阅读(502) 评论(0) 推荐(0) 编辑
摘要: 1.修改主机名:vi /etc/sysconfig/network NETWORKING=yesHOSTNAME=node1 2.修改域名映射:vi /etc/hosts 127.0.0.1 localhost localhost.localdomain localhost4 localhost4. 阅读全文
posted @ 2019-06-08 08:59 jqbai 阅读(176) 评论(0) 推荐(0) 编辑
摘要: 1.前置软件: JDK1.8 2.修改配置文件: cp slaves.template slaves vi slaves 添加从节点: slave1 slave2 cp spark-env.sh.template spark-env.sh vi spark-env.sh 添加环境变量: export 阅读全文
posted @ 2019-05-06 20:44 jqbai 阅读(822) 评论(0) 推荐(0) 编辑
摘要: zkCli.sh命令: stat命令可以得到一个znode节点的属性,并允许我们在已经存在的znode节点上设置监视点。通过在路径后面设置参数true(这个参数在ls命令中也可以使用)来添加监视点 ZooKeeper的API 创建ZooKeeper句柄的构造函数 ZooKeeper(String c 阅读全文
posted @ 2019-05-06 11:51 jqbai 阅读(140) 评论(0) 推荐(0) 编辑
摘要: spark-submit官方文档 :http://spark.apache.org/docs/latest/submitting-applications.html spark-properties官方文档:http://spark.apache.org/docs/latest/configurat 阅读全文
posted @ 2019-04-28 14:30 jqbai 阅读(615) 评论(0) 推荐(0) 编辑
摘要: 预置: 1.Visual Studio 2010 2.CYGWIN(设置到path中) 3.jdk(设置到path中) 4.Framework4(系统如果有就不需要安装) 5.win7 sdk 7.1 6.openjdk8(http://jdk.java.net/这里可以下载,下载链接:http:/ 阅读全文
posted @ 2019-03-23 17:18 jqbai 阅读(441) 评论(0) 推荐(0) 编辑