会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
Zeus~
Stay Hungry Stay Foolish
博客园
首页
新随笔
联系
订阅
管理
上一页
1
···
3
4
5
6
7
8
9
10
11
下一页
2019年2月26日
flink-conf.yaml
摘要: Flink 配置文件 对于管理员来说,差不多经常调整的就只有 conf 下的flink conf.yaml : 经过初步的调整,大约有以下模块的参数(未优化) Licensed to the Apache Software Foundation (ASF) under one or more con
阅读全文
posted @ 2019-02-26 13:56 Zeus~
阅读(3668)
评论(0)
推荐(0)
2019年2月19日
Spark Standalone spark-default.conf
摘要: Example: spark.master spark://master:7077 spark.eventLog.enabled true spark.eventLog.dir hdfs://namenode:8021/directory spark.serializer org.apache.sp
阅读全文
posted @ 2019-02-19 16:14 Zeus~
阅读(758)
评论(0)
推荐(0)
Spark Standalone spark-env.sh
摘要: export JAVA_HOME=/app/jdk export SPARK_MASTER_PORT=7077 export SPARK_MASTER_WEBUI_PORT=8080 export SPARK_WORKER_CORES=50 export SPARK_WORKER_OPTS=" Ds
阅读全文
posted @ 2019-02-19 16:12 Zeus~
阅读(320)
评论(0)
推荐(0)
2019年1月7日
windows linux 文件编码转换
摘要: 查看文件编码在Linux中查看文件编码可以通过以下几种方式:1.在Vim中可以直接查看文件编码:set fileencoding即可显示文件编码格式。如果你只是想查看其它编码格式的文件或者想解决用Vim查看文件乱码的问题,那么你可以在~/.vimrc 文件中添加以下内容:set encoding=u
阅读全文
posted @ 2019-01-07 10:28 Zeus~
阅读(2035)
评论(0)
推荐(0)
2018年12月25日
Hbase G1 gc 调优最终参数
摘要: export HBASE_HEAPSIZE=16384export HBASE_OFFHEAPSIZE=25gexport HBASE_MASTER_OPTS="$HBASE_MASTER_OPTS -Xmx16g -Xms16g -Xmn4g -Xss256k -XX:MaxPermSize=25
阅读全文
posted @ 2018-12-25 11:07 Zeus~
阅读(3334)
评论(1)
推荐(1)
2018年12月10日
Windows 环境下的 protoc 安装(转)
摘要: 如果是为了编译hadoop2.8.0源码,必须使用2.5.0版本的protobuf,安装方法同下 1. 下载需要的安装包:https://github.com/google/protobuf/releases protoc-3.1.0-win32.zip(protoc-2.5.0-win32.zip
阅读全文
posted @ 2018-12-10 11:23 Zeus~
阅读(15537)
评论(0)
推荐(3)
2018年12月3日
Hbase 元数据一致性检查(转)
摘要: 最近在学习HBase先关的知识,顺便做一下笔记,以加深知识的了解和掌握。 Hbase常用工具 文件检测修复工具 hbase hbck -help 常用选项: -details 显示所有region检查的完整报告 -summary 输出表和状态的总结信息 -metaonly 只检查-ROOT-和.ME
阅读全文
posted @ 2018-12-03 19:23 Zeus~
阅读(2388)
评论(0)
推荐(1)
Slow ReadProcessor&Error Slow BlockReceiver错误日志分析(转)
摘要: 1.总结 "Slow ReadProcessor" 和"Slow BlockReceiver"往往是因为集群负载比较高或者某些节点不健康导致的,本文主要是帮助你确认是因为集群负载高导致的还是因为某些节点的硬件问题。 2.症状 1.作业比以前运行的时间变长 2.Job的日志中有以下WARN的信息 3.
阅读全文
posted @ 2018-12-03 10:13 Zeus~
阅读(4243)
评论(0)
推荐(0)
2018年11月20日
Hbase CMS GC 调优。
摘要: export HBASE_OPTS="-XX:+UseConcMarkSweepGC" export HBASE_LOG_DIR=/app/hbase/logexport HBASE_PID_DIR=/app/hbase/tmpexport HBASE_HEAPSIZE=16384export HB
阅读全文
posted @ 2018-11-20 11:52 Zeus~
阅读(389)
评论(0)
推荐(0)
2018年11月7日
[技术]排查线上问题
摘要: 简介 简介 产品交付后对于项目管理人员往往就是工作接近尾声,但是对于一线开发和运维的小伙伴,那是维护工作的起点. 线上问题对于程序员来说其实就是生产环境中遇到的问题总称,优先级对于开发同学和运维同学来说是最高级别.当一位工程师遇到线上问题,一般都会放下手头的工作,优先全力解决线上问题. 往往系统运维
阅读全文
posted @ 2018-11-07 21:07 Zeus~
阅读(709)
评论(0)
推荐(0)
上一页
1
···
3
4
5
6
7
8
9
10
11
下一页
公告