chenzechao

2018年5月14日

摘要： ### 查看目录配额 hdfs dfs -count -q -h /user/hive/warehouse/db_name.db ### 查看整个HDFS的空间大小 hdfs dfs -df -h /user/ Filesystem Size Used Available Use% hdfs://hdfs01 10 P 8 P ... 阅读全文

posted @ 2018-05-14 10:50 chenzechao 阅读(2992) 评论(0) 推荐(0)

2018年5月8日

kafka删除主题数据和删除主题

摘要： 1、删除主题在server.properties中增加设置，默认未开启 delete.topic.enable=true 删除主题命令 /bin/kafka-topics --delete --topic test --zookeeper localhost:2181 2、删除主题数据删除主题命阅读全文

posted @ 2018-05-08 22:13 chenzechao 阅读(3441) 评论(0) 推荐(0)

zookeeper崩溃修复

摘要： cat /etc/zookeeper/conf/zoo.cfg 找到dataDir=/var/lib/zookeeper 切换到路径/var/lib/zookeeper cd /var/lib/zookeeper 查看目录下的文件： ls 存在version-2 删除version-2 mv ./v 阅读全文

posted @ 2018-05-08 22:10 chenzechao 阅读(310) 评论(0) 推荐(0)

2018年5月6日

Zookeeper查看版本

该文被密码保护。阅读全文

posted @ 2018-05-06 11:22 chenzechao 阅读(11086) 评论(0) 推荐(0)

2018年5月2日

使用vlookup函数下拉全部相同解决

摘要：菜单“公式”～“计算选项”改为自动ref: https://zhidao.baidu.com/question/561971299094821004.html 阅读全文

posted @ 2018-05-02 14:57 chenzechao 阅读(9448) 评论(0) 推荐(0)

hive mapresuce原理

摘要：待完成阅读全文

posted @ 2018-05-02 13:35 chenzechao 阅读(189) 评论(0) 推荐(0)

JAVA的GC

摘要：待完成阅读全文

posted @ 2018-05-02 13:34 chenzechao 阅读(79) 评论(0) 推荐(0)

kafka offset

摘要： topic 创建主题 sh /opt/kafka/bin/kafka-topics.sh --zookeeper 127.0.0.1:2181 --create --topic yf_mysoft_prd --partitions 2 --replication-factor 1 查看所有主题 sh 阅读全文

posted @ 2018-05-02 13:34 chenzechao 阅读(125) 评论(0) 推荐(0)

2018年4月30日

dos for循环

摘要： for %1 in (%windir%\system32\*.dll) do regsvr32.exe /s %1 for /f %1 in (phone.txt) do ( echo %1 ping -n 5 127.0.0.1 > tmp_file ) for %1 in (1 2 3 3 4) do ( echo %1 ping -n... 阅读全文

posted @ 2018-04-30 22:58 chenzechao 阅读(122) 评论(0) 推荐(0)

2018年4月29日

sparkSQL元数据缓存不同步 beeline连接的表结构与hive不一致

摘要：之前遇到过的坑，通过beeline连接spark thirft server，当在Hive进行表结构修改，如replace/add/change columns后，表结构没有变化，还是旧的表结构，导致无法验证数据。操作步骤如下：经测试，在spark2.1中无此问题。 ref: https://b 阅读全文

posted @ 2018-04-29 19:33 chenzechao 阅读(758) 评论(0) 推荐(0)

公告