2015 年 9月随笔档案 - 程序优化

hive连接数

摘要：使用hive分析日志作业很多的时候，需要修改mysql的默认连接数修改方法打开/etc/my.cnf文件在[mysqld] 中添加 max_connections=1000重启mysql服务 service mysqld restartmysql>show ... 阅读全文

posted @ 2015-09-26 23:01 程序优化阅读(2718) 评论(1) 推荐(0)

摘要：mysql修改表、字段、库的字符集修改数据库字符集：ALTER DATABASE db_name DEFAULT CHARACTER SET character_name [COLLATE ...];把表默认的字符集和所有字符列（CHAR,VARCHAR,TEXT）改... 阅读全文

posted @ 2015-09-24 01:19 程序优化阅读(213) 评论(0) 推荐(0)

摘要：如果在INSERT语句末尾指定了ON DUPLICATE KEY UPDATE，并且插入行后会导致在一个UNIQUE索引或PRIMARY KEY中出现重复值，则在出现重复值的行执行UPDATE；如果不会导致唯一值列重复的问题，则插入新行。例如，如果列 a 为... 阅读全文

posted @ 2015-09-23 11:11 程序优化阅读(1302) 评论(0) 推荐(0)

摘要：频繁的文件访问会导致系统的Cache使用量大增 $ free -m total used free shared buffers cached Mem: 3955 3926 28 0 55 3459 -/+ buffers/cache: 411 3544 ... 阅读全文

posted @ 2015-09-21 16:26 程序优化阅读(235) 评论(0) 推荐(0)

高效工作指南

摘要：Facebook 内部分享：不论你如何富有，你都赚不到更多的时间，你也回不到过去。没有那么多的假如，只有指针滴答的时光飞逝和你应该好好把握的现在，以下25张PPT的分享将为您带来时间价值管理的技巧。1、时间常有，时间优先2、时间总会有的：每天只计划 4～5 小时真正的... 阅读全文

posted @ 2015-09-20 23:03 程序优化阅读(164) 评论(0) 推荐(0)

摘要：本文总结了java中byte转换int时总是与0xff进行与运算的原因。在剖析该问题前请看如下代码：public static String bytes2HexString(byte[] b) { String ret = ""; for (int i = 0; i ... 阅读全文

posted @ 2015-09-20 01:12 程序优化阅读(233) 评论(0) 推荐(0)

DSP投放进阶指南

摘要：阅读全文

posted @ 2015-09-20 00:43 程序优化阅读(145) 评论(0) 推荐(0)

cloudera manager配置

摘要：cloudera manager的数据库配置文件位置： /etc/cloudera-scm-server/db.properties 阅读全文

posted @ 2015-09-17 18:55 程序优化阅读(396) 评论(0) 推荐(0)

摘要：service cloudera-scm-agent stopservice cloudera-scm-agent stopumount /var/run/cloudera-scm-agent/processumount /var/run/cloudera-scm-a... 阅读全文

posted @ 2015-09-17 17:21 程序优化阅读(225) 评论(0) 推荐(0)

摘要：NoSuchObjectException(message:There is no database named cloudera_manager_metastore_canary_test_db_hive_hivemetastore_df61080e04cd7eb3... 阅读全文

posted @ 2015-09-17 10:58 程序优化阅读(1661) 评论(0) 推荐(0)

摘要：Connection reset by peer的常见原因： 1）服务器的并发连接数超过了其承载量，服务器会将其中一些连接关闭；如果知道实际连接服务器的并发客户数没有超过服务器的承载量，看下有没有网络流量异常。可以使用netstat -an查看网络连接情况。 ... 阅读全文

posted @ 2015-09-03 15:06 程序优化阅读(1237) 评论(0) 推荐(0)

摘要：JVM致命错误日志(hs_err_pid.log)分析发表于5天前(2015-08-28 17:10) 当jvm出现致命错误时，会生成一个错误文件 hs_err_pid.log，其中包括了导致jvm crash的重要信息，可以通过分析该文件定位到导致crash的根... 阅读全文

posted @ 2015-09-02 13:07 程序优化阅读(645) 评论(0) 推荐(0)

DolphinScheduler(海豚调度)