Thinking in BigData

摘要： cloudera manager安装hue后想开启访问mysql（librdbms）需要在这里配置（hue_safety_valve.ini） 添加配置如下 [librdbms] # The RDBMS app can have any number of databases configured 阅读全文

摘要： hue中使用hue用户（hue admin）访问hdfs报错： Cannot access: /. Note: you are a Hue admin but not a HDFS superuser, "hdfs" or part of HDFS supergroup, "supergroup". 阅读全文

摘要： oozie中通过shell执行impala，脚本如下： $ cat test_impala.sh #!/bin/sh /usr/bin/kinit -kt /tmp/impala.keytab impala/server04 /usr/bin/impala-shell -i server04:210 阅读全文

摘要： yarn开启日志归集功能，除了配置之外 yarn.log-aggregation-enable=true 还要检查/tmp/logs目录是否存在以及权限，尤其是在开启kerberos之后，有些目录可能不能自动创建成功，需要手工创建： $ hdfs dfs -mkdir /tmp$ hdfs dfs 阅读全文

摘要： 用户提交任务到yarn时有可能遇到下面的错误： 1） Requested user anything is not whitelisted and has id 980,which is below the minimum allowed 1000 这是因为yarn中配置min.user.id=10 阅读全文

摘要： 命令行 $ oozie help 1 导出环境变量 $ export OOZIE_URL=http://oozie_server:11000/oozie 否则都需要增加 -oozie 参数，比如 $ oozie jobs -oozie http://oozie_server:11000/oozie 阅读全文

摘要： kibana添加index pattern卡住，通过浏览器查看请求返回状态为403 Forbidden，返回消息为： {"message":"blocked by: [FORBIDDEN/12/index read-only / allow delete (api)];: [cluster_bloc 阅读全文

摘要： Index Settings 重要索引配置 Index level settings can be set per-index. Settings may be: 1 static 静态索引配置 They can only be set at index creation time or on a 阅读全文

摘要： yarn常用rest api 1 metrics # curl http://localhost:8088/ws/v1/cluster/metrics The cluster metrics resource provides some overall metrics about the clust 阅读全文

摘要： Docker images have a tag named latest which doesn’t work as you expect.Latest is just a tag with a special name.“Latest” simply means “the last build/ 阅读全文