会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
信方互联网硬汉
行走互联,硬汉信方
博客园
首页
新随笔
联系
订阅
管理
上一页
1
···
8
9
10
11
12
13
14
15
16
···
39
下一页
2019年3月22日
Hadoop记录-Hive调优:让任务并行执行
摘要: set mapred.job.queue.name=pms; //设置队列set hive.exec.reducers.max=8; //设置最大的reducersset mapred.reduce.tasks=8; //设置最大的redue tasksset hive.exec.parallel=
阅读全文
posted @ 2019-03-22 09:13 信方
阅读(2059)
评论(0)
推荐(1)
2019年3月21日
Hadoop记录-Linux Service
摘要: [Unit] Description=Datanode After=syslog.target network.target auditd.service sshd.service datanode_precheck.service Requires=datanode_precheck.servic
阅读全文
posted @ 2019-03-21 11:37 信方
阅读(132)
评论(0)
推荐(0)
2019年3月14日
Linux记录-jstack采集namenode堆栈信息
摘要: #!/bin/bash #以hdfs用户执行jstack每分钟采集一次namenode heapstack日志 #mkdir -p /tmp/jstack export JAVA_HOME=xxx cd /log/hadoop/jstack_nn pid=$(${JAVA_HOME}/bin/jps
阅读全文
posted @ 2019-03-14 15:31 信方
阅读(518)
评论(0)
推荐(0)
2019年3月12日
Linux记录-lsof打开文件工具常用操作
摘要: lsof `which httpd` //那个进程在使用apache的可执行文件 lsof /etc/passwd //那个进程在占用/etc/passwd lsof /dev/hda6 //那个进程在占用hda6 lsof /dev/cdrom //那个进程在占用光驱 lsof -c sendma
阅读全文
posted @ 2019-03-12 16:36 信方
阅读(253)
评论(0)
推荐(0)
2019年3月11日
Hadoop记录-HDFS balancer配置
摘要: HDFS balancer配置(可通过CM配置)dfs.datanode.balance.max.concurrent.moves 并行移动的block数量,默认5 dfs.datanode.balance.bandwidthPerSec Balance工具所占用的带宽,默认1048576(1MB)
阅读全文
posted @ 2019-03-11 22:55 信方
阅读(3272)
评论(0)
推荐(0)
2019年3月8日
Hadoop记录-Yarn命令
摘要: 概述 YARN命令是调用bin/yarn脚本文件,如果运行yarn脚本没有带任何参数,则会打印yarn所有命令的描述。 使用: yarn [--config confdir] COMMAND [--loglevel loglevel] [GENERIC_OPTIONS] [COMMAND_OPTIO
阅读全文
posted @ 2019-03-08 13:56 信方
阅读(1450)
评论(0)
推荐(0)
2019年3月6日
Linux记录-JMX监控JAVA进程
摘要: 3.修改xxx.sh 加入export JAVA_OPTS="-Dcom.sun.management.jmxremote.authenticate=false -Dcom.sun.management.jmxremote.port=8999 -Dcom.sun.management.jmxremo
阅读全文
posted @ 2019-03-06 10:20 信方
阅读(3195)
评论(0)
推荐(0)
Linux记录-定时crontab
摘要: /etc/crontab文件和crontab -e命令区别 1、格式不同 分 时 日 月 星期 要运行的命令 第1列分钟1~59 第2列小时1~23(0表示子夜) 第3列日1~31 第4列月1~12 第5列星期0~7(0和7表示星期天) 第6列要运行的命令 前者 # For details see
阅读全文
posted @ 2019-03-06 10:15 信方
阅读(328)
评论(0)
推荐(0)
2019年3月4日
Linux记录- Linux下限制rm -rf /
摘要: 操作说明: 为了防止在linux下执行操作的时候误操作rm -rf /,或者rm -rf 一些比较重要的目录,我们做以下操作来限制rm的删除 1、下载源码安装包 https://raw.githubusercontent.com/bazingafraser/cv/master/article/rm/
阅读全文
posted @ 2019-03-04 19:54 信方
阅读(3374)
评论(0)
推荐(0)
Linux-CentOS 查看(监控)服务器网卡流量
摘要: 1.使用系统自带的命令: watch more /proc/net/dev 2. 使用nload命令,需要自行安装 1)# yum install flex byacc libpcap ncurses ncurses-devel libpcap-devel2)# wget http://www.ro
阅读全文
posted @ 2019-03-04 16:23 信方
阅读(2503)
评论(0)
推荐(0)
上一页
1
···
8
9
10
11
12
13
14
15
16
···
39
下一页
公告