运营系统一站式分析模型

摘要: 运营系统分析平台技术设计: import org.apache.hadoop.fs.{FileSystem, Path} import org.apache.spark.sql.SparkSession class HiveWriter(tableName: String, outputDir: S 阅读全文
posted @ 2017-11-25 21:25 踏雪扬尘-wx 阅读(627) 评论(0) 推荐(0)

shell关键字含义

摘要: linux中shell变量$#,$@,$0,$1,$2的含义解释: 变量说明: $$ Shell本身的PID(ProcessID) $! Shell最后运行的后台Process的PID $? 最后运行的命令的结束代码(返回值) $- 使用Set命令设定的Flag一览 $* 所有参数列表。如"$*"用 阅读全文
posted @ 2017-11-20 17:59 踏雪扬尘-wx 阅读(337) 评论(0) 推荐(0)

wealoha thrift-client-pool 总结

摘要: ObjectPool 接口: public enum PooledObjectState { /** * In the queue, not in use. */ IDLE, /** * In use. */ ALLOCATED, /** * In the queue, currently bein 阅读全文
posted @ 2017-11-20 00:12 踏雪扬尘-wx 阅读(724) 评论(0) 推荐(0)

radis学习总结

摘要: Redis与Memcached的比较. 1.Memcached是多线程,而Redis使用单线程. 2.Memcached使用预分配的内存池的方式,Redis使用现场申请内存的方式来存储数据,并且可以配置虚拟内存。 3.Redis可以实现持久化,主从复制,实现故障恢复。 4.Memcached只是简单 阅读全文
posted @ 2014-06-30 17:10 踏雪扬尘-wx 阅读(406) 评论(0) 推荐(0)