papering - 博客园

2019年6月11日

摘要：阿里提供的12种常用后端开发工具 - 51CTO.COMhttp://developer.51cto.com/art/201906/597685.htm 12 Backend Development Tools by Alibaba - DZone Web Devhttps://dzone.com/ 阅读全文

posted @ 2019-06-11 12:50 papering 阅读(640) 评论(0) 推荐(0)

临界区代码 critical section Locks and critical sections in multiple threads

摘要：临界区在同步的程序设计中，临界区段（Critical section）指的是一个访问共享资源（例如：共享设备或是共享存储器）的程序片段，而这些共享资源有无法同时被多个线程访问的特性。当有线程进入临界区段时，其他线程或是行程必须等待（例如：bounded waiting 等待法），有一些同步的机制阅读全文

posted @ 2019-06-11 08:58 papering 阅读(435) 评论(0) 推荐(0)

竞态条件 race condition data race

摘要：竞态条件 race condition Race condition - Wikipedia https://en.wikipedia.org/wiki/Race_condition A race condition or race hazard is the condition of an ele 阅读全文

posted @ 2019-06-11 08:57 papering 阅读(434) 评论(0) 推荐(0)

2019年6月10日

高并发系统队列减库存不知道谁依赖“我”的处理结果、不关心其他系统如何处理后续业务

摘要：聊聊高并发系统之队列术 https://mp.weixin.qq.com/s/qoXwqKsSLE1i7YB7_c19Cg 张开涛亿级流量网站架构 2016-08-30 队列在数据结构中是一种线性表，从一端插入数据，然后从另一端删除数据。本文目的不是讲解各种队列算法，而是在应用层面讲述使用队列能解阅读全文

posted @ 2019-06-10 23:27 papering 阅读(466) 评论(0) 推荐(0)

你的Node应用，对接分布式链路跟踪系统了吗？(一）原创：金炳 Node全栈进阶 4天前戳蓝字「Node全栈进阶」关注我们哦

摘要：你的Node应用，对接分布式链路跟踪系统了吗？(一）原创：金炳 Node全栈进阶 4天前戳蓝字「Node全栈进阶」关注我们哦阅读全文

posted @ 2019-06-10 22:46 papering 阅读(290) 评论(0) 推荐(0)

腾讯基于 Flink 的实时流计算平台演进之路

摘要： https://mp.weixin.qq.com/s/MGnG_Mpf6CUQWLJHvmWqLA 阅读全文

posted @ 2019-06-10 18:42 papering 阅读(304) 评论(0) 推荐(0)

2019年6月8日

tmp

摘要： test 阅读全文

posted @ 2019-06-08 14:41 papering 阅读(160) 评论(0) 推荐(0)

2019年6月7日

寻找丢失的微服务-HAProxy热加载问题的发现与分析原创：单既喜一点大数据技术团队 4月8日在一点资讯的容器计算平台中，我们通过HAProxy进行Marathon服务发现。本文记录HAProxy服务热加载后某微服务50%概率失效的问题。设计3组对比实验，验证了陈旧配置的HAProxy在Reload时没有退出进而导致微服务丢失，并给出了解决方案. Keywords：HAProxy热加

摘要：寻找丢失的微服务-HAProxy热加载问题的发现与分析原创：单既喜一点大数据技术团队 4月8日在一点资讯的容器计算平台中，我们通过HAProxy进行Marathon服务发现。本文记录HAProxy服务热加载后某微服务50%概率失效的问题。设计3组对比实验，验证了陈旧配置的HAProxy在Re 阅读全文

posted @ 2019-06-07 00:03 papering 阅读(530) 评论(0) 推荐(0)

2019年6月6日

SEQ!org.apache.hadoop.io.LongWritable

摘要： [uhadoop@10-13-109-236 subdir26]$ $HADOOP_HOME/bin/hadoop fs -cat /data/flumeEvents/FlumeData.1559805156238WARNING: An illegal reflective access opera 阅读全文

posted @ 2019-06-06 23:53 papering 阅读(658) 评论(0) 推荐(0)

Discretized Streams: A Fault-Tolerant Model for Scalable Stream Processing

摘要： https://www2.eecs.berkeley.edu/Pubs/TechRpts/2012/EECS-2012-259.pdf Discretized Streams: A Fault-Tolerant Model for Scalable Stream Processing Matei Z 阅读全文

posted @ 2019-06-06 17:18 papering 阅读(208) 评论(0) 推荐(0)

2019年6月5日

Flume+NG+Performance+Measurements

摘要： https://cwiki.apache.org/confluence/display/FLUME/Flume+NG+Performance+Measurements 阅读全文

posted @ 2019-06-05 09:39 papering 阅读(211) 评论(0) 推荐(0)

2019年6月4日

读写不同的线程

摘要： flume 1.x开始输入数据的读取与输出数据的写入在由不同的工作线程（称为运行器）来处理了。在flume 0.9中，输入线程也执行对输出的写入（故障恢复重试除外）。输出写入器很慢（而不仅仅是完全失败），那么它会阻塞Flume 接收数据的能力。这种新的异步设计使得输入线程完全意识不到任何下阅读全文

posted @ 2019-06-04 22:55 papering 阅读(178) 评论(0) 推荐(0)

flume 诞生背景数据同步

摘要： flume一开始是cloudlera的项目当时他们的工程师需要一次次地为客户编写工具来实现数据的自动化导入阅读全文

posted @ 2019-06-04 22:42 papering 阅读(318) 评论(0) 推荐(0)

2019年6月3日

制定一套良好的健模式、语法和命名约定是高效稳定的解决方案和技术混乱的分水岭

摘要：制定一套良好的健模式、语法和命名约定是高效稳定的解决方案和技术混乱的分水岭 KEYS 需要遍历数据库中的每一个键，对实例造成长时间的阻塞，甚至会导致Redis的内存耗尽 SCAN HSCAN SSCAN ZSCAN 为所有key提供一个迭代器，可以对所有键进行增量式调用。抽取一个随机的键片段。如果阅读全文

posted @ 2019-06-03 22:31 papering 阅读(228) 评论(0) 推荐(0)

语义化版本模式

摘要： major.minor.patchlevel minor 偶数稳定版本奇数不稳定的分分支阅读全文

posted @ 2019-06-03 22:16 papering 阅读(188) 评论(0) 推荐(0)

a

摘要： a 阅读全文

posted @ 2019-06-03 21:58 papering 阅读(181) 评论(0) 推荐(0)

基础数据结构对应基础api

摘要：《深入理解Redis》 mastering redis 阅读全文

posted @ 2019-06-03 21:50 papering 阅读(195) 评论(0) 推荐(0)

yarn集群8088端口被攻击挖矿

摘要： yarn集群8088端口被攻击挖矿 https://www.jianshu.com/p/a2d6b0d827ab https://blog.csdn.net/lm709409753/article/details/80540715 https://labitacoranet.wordpress.co 阅读全文

posted @ 2019-06-03 20:25 papering 阅读(647) 评论(0) 推荐(0)

a

摘要： x 阅读全文

posted @ 2019-06-03 19:42 papering 阅读(461) 评论(0) 推荐(0)

2019年6月2日

知乎千万级高性能长连接网关

摘要： https://mp.weixin.qq.com/s/jfHFXZpzbAEbHKkCMSev6w 对话 CTO〡用声音在一起，听荔枝 CTO 丁宁聊 UGC 声音互动平台的技术世界原创王颖奇极客公园 2018-12-01 知乎千万级高性能长连接网关揭秘 - 知乎 https://zhuanl 阅读全文

posted @ 2019-06-02 22:13 papering 阅读(519) 评论(0) 推荐(0)

可用性可靠性计算

摘要： i 系统每月崩溃1分钟可用性 1-1/(30*24*60)＝99.998％非常不可靠 ii 系统从来不崩溃，但是每年要停机2周高度可靠可用性 1-2*7/365＝96.164％阅读全文

posted @ 2019-06-02 22:05 papering 阅读(1469) 评论(0) 推荐(0)

CAP C3-2分析

摘要：一致性可用性分区容错性《Hadoop构建数据仓库实践》 p84 阅读全文

posted @ 2019-06-02 20:32 papering 阅读(161) 评论(0) 推荐(0)

51信用卡金融风控场景下实时计算引擎的设计与实践

摘要： https://mp.weixin.qq.com/s/Rx43XfhgdwerQWLn1eI3Ww 51信用卡金融风控场景下实时计算引擎的设计与实践原创：周来 51NB技术 5月7日阅读全文

posted @ 2019-06-02 00:00 papering 阅读(307) 评论(0) 推荐(0)

2019年6月1日

单元素的枚举类型实现 singleton 单例

摘要： p15 阅读全文

posted @ 2019-06-01 21:22 papering 阅读(225) 评论(0) 推荐(0)

遇到多个构造器参数时要考虑用构建器 builder 模式 JavaBean 线程安全

摘要： effective java p9 JavaBeans模式阻止了把类做成不可变的可能，这需要程序员付出额外的努力来确保它的线程安全。阅读全文

posted @ 2019-06-01 21:03 papering 阅读(384) 评论(0) 推荐(0)

spark 内存优化策略 JVM 垃圾回收

摘要：策略阅读全文

posted @ 2019-06-01 19:58 papering 阅读(310) 评论(0) 推荐(0)

多租户概念方案大数据背景

摘要：数据共享计算隔离阅读全文

posted @ 2019-06-01 19:04 papering 阅读(524) 评论(0) 推荐(0)

2019年5月31日

阿里PB级Kubernetes日志平台建设实践

摘要：干货分享 | 阿里PB级Kubernetes日志平台建设实践https://www.infoq.cn/article/HiIxh-8o0Lm4b3DWKvph 日志最主要的采集工具是 Agent，在 Kubernetes 场景下，通常会分为两种采集方式：每种采集方式都有其对应的优缺点，这里简单总结阅读全文

posted @ 2019-05-31 23:09 papering 阅读(418) 评论(0) 推荐(0)

阿里巴巴高可用技术专家襄玲：压测环境的设计和搭建 PTS - 襄玲云栖社区今天

摘要：阿里巴巴高可用技术专家襄玲：压测环境的设计和搭建 PTS - 襄玲云栖社区今天阅读全文

posted @ 2019-05-31 23:04 papering 阅读(279) 评论(0) 推荐(0)

【源码】openresty 限流

摘要：小结： 1、在连接环节计数，有清零环节有3个参量 maxburst unit_delay https://github.com/openresty/lua-resty-limit-traffic/blob/master/README.md -- limit the requests under 2 阅读全文

posted @ 2019-05-31 22:01 papering 阅读(811) 评论(0) 推荐(0)

Somatic hypermutation (or SHM) is a cellular mechanism by which the immune system adapts to the new foreign elements that confront it (e.g. microbes), as seen during class switching. Somatic hypermut

摘要： Somatic hypermutation (or SHM) is a cellular mechanism by which the immune system adapts to the new foreign elements that confront it (e.g. microbes), 阅读全文

posted @ 2019-05-31 21:20 papering 阅读(274) 评论(0) 推荐(0)

openrstry 限流是否有清零逻辑连接池

摘要： openrstry 限流是否有清零逻辑 https://github.com/openresty/lua-resty-limit-traffic # encoding=utf-8 # Shawn 2020/4/28 10:31 from asgiref.sync import async_to_s 阅读全文

posted @ 2019-05-31 20:45 papering 阅读(440) 评论(0) 推荐(0)

yarn 单点故障重启 ResourceManger Restart

摘要： http://hadoop.apache.org/docs/stable/hadoop-yarn/hadoop-yarn-site/ResourceManagerRestart.html Feature Phase 1: Non-work-preserving RM restart As of Ha 阅读全文

posted @ 2019-05-31 20:44 papering 阅读(622) 评论(0) 推荐(0)

UML部署图介绍

摘要： https://www.w3cschool.cn/uml_tutorial/uml_tutorial-mi5w28ur.html 阅读全文

posted @ 2019-05-31 14:41 papering 阅读(233) 评论(0) 推荐(0)

猴子补丁

摘要： https://www.cnblogs.com/youxin/p/3805706.html http://www.dongcoder.com/detail-1218275.html 阅读全文

posted @ 2019-05-31 00:25 papering 阅读(155) 评论(0) 推荐(0)

牺牲用户体验

摘要：统计系统收集系统信息阅读全文

posted @ 2019-05-31 00:25 papering 阅读(130) 评论(0) 推荐(0)

2019年5月30日

并行执行函数