12 2018 档案

集群间数据迁移报错
摘要：[dip@dip003 ~]$ hadoop distcp -update /user/hive/warehouse/tmp.db/ hdfs://172.26.xx.xx:8020/user/hive/warehouse/tmp.db/18/12/24 10:27:06 ERROR tools.D 阅读全文
posted @ 2018-12-24 10:28 bioamin 阅读(653) 评论(0) 推荐(0)
hive学习04-员工部门表综合案例
摘要：知识点： 格式转换：cast（xxx as int） 按某列分桶某列排序，排序后打标机；例如：求每个地区工资最高的那个人的信息； ROW_NUMBER() OVER(PARTITION BY COLUMN ORDER BY COLUMN) row_number() over(distribute b 阅读全文
posted @ 2018-12-22 20:46 bioamin 阅读(977) 评论(0) 推荐(0)
hive学习03-求一年中的最大温度
摘要：知识点： substr、concat函数的使用： row_number() over(distribute by year sort by temp desc) #按照年分组，按照tmp去排序 需求：现有hive表temp，其中只有一个字段(temp_record string)，每一行代表某一天的 阅读全文
posted @ 2018-12-22 15:46 bioamin 阅读(348) 评论(0) 推荐(0)
mysql运维
摘要：反反复复装了好多次的mysql，上学的时候从来没有考虑过稳定性，装起来，能跑通，增删改查没有问题万事大吉。参与工作后参与平台搭建和维护，平台的稳定性是首先必须要考虑的问题，之前装mysql使用经历了密码失效，初始化失败，起不动等等问题。今天公司运维组的一个大佬给我们培训了mysql运维知识，解决了很 阅读全文
posted @ 2018-12-19 15:02 bioamin 阅读(480) 评论(0) 推荐(0)
Inspector did not run successfully.
摘要：装虚拟机，卡在这个报错1天了， server没有问题，其余所有的agent都不能运行。 这部分没有日志，只有单纯的报错信息，omg，百度、bing一顿骚操作，还是没有解决问题。 因为默认安装jdk1.7 所以图形化安装的时候我没有选择安装jdk，采用了自己的jdk，所以在这部分检查才出现问题 先进网 阅读全文
posted @ 2018-12-03 18:09 bioamin 阅读(2161) 评论(2) 推荐(0)
ProtocolError: <ProtocolError for 127.0.0.1/RPC2: 401 Unauthor.
摘要：安装cloudera-manager-agent报错 查看/var/log/cloudera-scm-agent.log 报错 Traceback (most recent call last): File "/usr/lib64/cmf/agent/build/env/lib/python2.7/ 阅读全文
posted @ 2018-12-01 21:26 bioamin 阅读(4139) 评论(2) 推荐(0)