puroc

2018年6月27日

摘要：【impala建表】kudu的表必须有主键，作为分区的字段需排在其他字段前面。【range分区】（不推荐）CREATE TABLE KUDU_WATER_HISTORY ( id STRING, year INT,device STRING,reading INT,time STRING,PRIM 阅读全文

posted @ 2018-06-27 15:37 puroc 阅读(923) 评论(0) 推荐(0)

impala+hdfs+parquet格式文件

摘要： [创建目录]hdfs dfs -mkdir -p /user/hdfs/sample_data/parquet [赋予权限]sudo -u hdfs hadoop fs -chown -R impala:supergroup /user/hdfs/sample_data [删除目录]hdfs dfs 阅读全文

posted @ 2018-06-27 14:43 puroc 阅读(4048) 评论(0) 推荐(0)

impala+hdfs+csv格式文件

摘要： [创建目录]hdfs dfs -mkdir -p /user/hdfs/sample_data/csv/devicehdfs dfs -mkdir -p /user/hdfs/sample_data/csv/metrics [赋予权限]sudo -u hdfs hadoop fs -chown -R 阅读全文

posted @ 2018-06-27 14:37 puroc 阅读(659) 评论(0) 推荐(0)

2018年6月26日

CDH impala安装

摘要：环境 CDH版本：5.12.1 添加impala parcel 1、菜单“主机”--》Parcel--》配置--》远程 Parcel 存储库 URL，点击添加按钮，添加一个URL，https://archive.cloudera.com/beta/impala-kudu/parcels/latest 阅读全文

posted @ 2018-06-26 19:42 puroc 阅读(2014) 评论(0) 推荐(0)

2017年2月5日

calico性能测试

摘要：硬件环境：三台虚拟机： 192.168.99.129 master（kube-apiserver、kube-controller-manager、kube-proxy、kube-scheduler、kubelet、etcd、calico、docker） 192.168.99.130 slave1（阅读全文

posted @ 2017-02-05 16:22 puroc 阅读(1389) 评论(0) 推荐(0)

2017年2月2日

kubernetes和calico集成

摘要：硬件环境：三台虚拟机： 192.168.99.129 master（kube-apiserver、kube-controller-manager、kube-proxy、kube-scheduler、kubelet、etcd、calico、docker） 192.168.99.130 slave1（阅读全文

posted @ 2017-02-02 21:58 puroc 阅读(8790) 评论(0) 推荐(1)

2017年1月21日

telnet master主机的NodePort服务不通的问题

摘要：硬件环境：两台物理机： 172.16.114.210（master主机） 172.16.114.211（node主机）软件环境： kubernetes 1.5.2 flannel 0.5.5 问题描述：部署了一个mysql的NodePort服务，指定nodePort端口为30010，telne 阅读全文

posted @ 2017-01-21 14:53 puroc 阅读(3028) 评论(0) 推荐(0)

2017年1月18日

分析kube-proxy的iptables规则

摘要： NodePort service 创建一个mysql的NodePort服务，对应两个pod实例，rc和service的配置如下： 1、rc配置 2、service配置 3、创建的service情况 4、kube-proxy占用端口情况 5、对应的iptables规则从以上信息看出，kube-pro 阅读全文

posted @ 2017-01-18 18:56 puroc 阅读(5041) 评论(1) 推荐(1)

2017年1月1日

Mongodb复制集配置

摘要：环境： 192.168.99.129 master192.168.99.130 slave1 1、配置复制集在两台服务器上分别执行执行mongo命令，先添加一台再添加另外一台执行rs.status()查看复制集节点的状态 2、验证复制集数据同步在主节点插入数据后，看从节点是否存在同样的数据阅读全文

posted @ 2017-01-01 13:10 puroc 阅读(1969) 评论(0) 推荐(0)

2016年11月30日

Alluxio部署（集群模式）

摘要：下载（pre build for Hadoop 2.7) http://www.alluxio.org/download` tar xvf alluxio 1.3.0 hadoop2.7 bin.tar ./bin/alluxio bootstrapConf 10.10.20.204 localho 阅读全文

posted @ 2016-11-30 15:19 puroc 阅读(972) 评论(0) 推荐(0)

公告