程序优化 - 博客园

摘要：在一个需要低延时响应的hbase集群中，使用hbase默认的客户端超时配置简直就是灾难。但是我们可以考虑在客户端上加上如下几个参数，去改变这种状况:1. hbase.rpc.timeout: RPC timeout, The default 60s, 可以修改为500... 阅读全文

posted @ 2016-03-14 16:03 程序优化阅读(2096) 评论(0) 推荐(0) 编辑

摘要：机器学习路线图1. 引言最近google的阿尔法狗大战李世石刷屏了，闲下来时也了解点机器学习or深度学习的理论2. 机器学习关注问题并非所有的问题都适合用机器学习... 阅读全文

posted @ 2016-03-10 18:51 程序优化阅读(348) 评论(0) 推荐(0) 编辑

摘要：序列化对单例的破坏本文将通过实例+阅读Java源码的方式介绍序列化是如何破坏单例模式的，以及如何避免序列化对... 阅读全文

posted @ 2016-03-10 17:32 程序优化阅读(361) 评论(0) 推荐(0) 编辑

摘要：在hadoop集群启用权限控制后，发现job运行日志的ui访问不了， User [dr.who] is not authorized to view the logs for application原因 Resource Manager UI的默认用户dr.who权限... 阅读全文

posted @ 2016-03-02 21:27 程序优化阅读(1095) 评论(0) 推荐(0) 编辑

摘要：今天在测试集群用的mysql上，遇到个权限的问题：SQLException : SQL state: 42000 com.mysql.jdbc.exceptions.jdbc4.MySQLSyntaxErrorException: Access denied for ... 阅读全文

posted @ 2016-03-01 11:27 程序优化阅读(5621) 评论(0) 推荐(0) 编辑

摘要：阅读全文

posted @ 2016-02-29 00:00 程序优化阅读(100) 评论(0) 推荐(0) 编辑

摘要：最近在监控中发现HiveServer2连接到zookeeper里的连接持续上涨，很奇怪，虽然知道HiveServer2支持并发连接，使用ZooKeeper来管理Hive表的读写锁，但我们的环境并不需要这些，我们已经关闭并发功能，以下是线上的配置，甚至把这些值都改成fi... 阅读全文

posted @ 2016-02-23 15:55 程序优化阅读(738) 评论(0) 推荐(0) 编辑

摘要：数据案例-蓝米手机的精准广告营销2016-01-25 劲说背景介绍：假设我是大米手机的数据分析师大傅，今天收到市场运营小旋同学的春节投放需求，在大米平台的DMP投放展示广告，做促销蓝米手机活动，投放预算是100万，同时悄悄告诉我，如果投放ROI超过2，她们市场运营总监... 阅读全文

posted @ 2016-02-21 14:25 程序优化阅读(146) 评论(0) 推荐(0) 编辑

摘要：提纲 1、移动DSP与传统营销有什么不同？ 2、为什么移动DSP是大势所趋？ 3、哪些因素决定移动DSP的精准与否？ 4、如何辨别移动DSP的真伪优劣？ 5、不同行业的广告主如何用好移动DSP？ 6、怎么用移动DSP获得最优RO... 阅读全文

posted @ 2016-02-17 16:32 程序优化阅读(228) 评论(0) 推荐(0) 编辑

摘要：在分布式高并发的情况下，分布式主键生成策略可参考mongodb的objectid实现。ObjectId是一种轻量的，不同的机器不同的进程都能用全局唯一的同种方法生成它，而不是采用传统的自增的主键策略，因为在多台服务器上同步自动增加主键既费力又费时。ObjectId是一... 阅读全文

posted @ 2016-02-17 13:25 程序优化阅读(802) 评论(0) 推荐(0) 编辑

DolphinScheduler(海豚调度)