摘要：
Alluxio 1.8.1 官方：http://www.alluxio.org/ 一 简介 Open Source Memory Speed Virtual Distributed StorageAlluxio, formerly Tachyon, enables any application t 阅读全文
posted @ 2019-01-23 15:08
匠人先生
阅读(4676)
评论(0)
推荐(0)
摘要：
Flink 1.7 官方：https://flink.apache.org/ 一 简介 Apache Flink is an open source platform for distributed stream and batch data processing. Flink’s core is 阅读全文
posted @ 2019-01-22 22:25
匠人先生
阅读(1489)
评论(0)
推荐(1)
摘要：
1 添加、删除用户 # useradd $user# userdel $user 2 设置用户密码 # passwd $user /etc/passwd 3 查看$user的用户和组信息 # id $user 4 将用户$user添加到组$group # usermod -G $group $use 阅读全文
posted @ 2019-01-22 14:15
匠人先生
阅读(472)
评论(0)
推荐(1)
摘要：
hive通过外部表读写elasticsearch数据，和读写hbase数据差不多，差别是需要下载elasticsearch-hadoop-hive-6.6.2.jar，然后使用其中的EsStorageHandler； Connect the massive data storage and deep 阅读全文
posted @ 2019-01-21 20:54
匠人先生
阅读(3701)
评论(0)
推荐(1)
摘要：
在hive中创建外部表： CREATE EXTERNAL TABLE hive_hbase_table(key string, name string,desc string) STORED BY 'org.apache.hadoop.hive.hbase.HBaseStorageHandler' 阅读全文
posted @ 2019-01-21 20:38
匠人先生
阅读(2394)
评论(0)
推荐(1)
摘要：
hive及其他组件（比如spark、impala等）都会依赖hive metastore，依赖的配置文件位于hive-site.xml hive metastore重要配置 hive.metastore.warehouse.dirhive2及之前版本默认为/user/hive/warehouse/， 阅读全文
posted @ 2019-01-21 18:07
匠人先生
阅读(1254)
评论(0)
推荐(1)
摘要：
ElasticSearch 6.6.0 官方：https://www.elastic.co/ 一 简介 ElasticSearch简单来说是对lucene的分布式封装，增加了shard（每个shard是一个子索引，也是一个lucene的index）和replica的概念；所以在ElasticSear 阅读全文
posted @ 2019-01-21 15:44
匠人先生
阅读(623)
评论(0)
推荐(1)
摘要：
impala2.12 官方：http://impala.apache.org/ 一 简介 Apache Impala is the open source, native analytic database for Apache Hadoop. Impala is shipped by Cloude 阅读全文
posted @ 2019-01-21 13:38
匠人先生
阅读(3271)
评论(0)
推荐(1)
摘要：
kudu 1.7 官方：https://kudu.apache.org/ 一 简介 kudu有很多概念，有分布式文件系统（HDFS），有一致性算法（Zookeeper），有Table（Hive Table），有Tablet（Hive Table Partition），有列式存储（Parquet），有 阅读全文
posted @ 2019-01-21 12:45
匠人先生
阅读(3486)
评论(1)
推荐(2)
摘要：
Fortunately, Elasticsearch provides a very comprehensive and powerful REST API that you can use to interact with your cluster. Among the few things th 阅读全文
posted @ 2019-01-20 22:16
匠人先生
阅读(2706)
评论(0)
推荐(1)
浙公网安备 33010602011771号