摘要：关键词：SQL优化 , sargable , pushdown filter , predicate pushdown Sargable Sargable = Search ARGument ABLE ，即SQL中可利用数据库自身索引优势对查询条件进行执行性能优化。换句话说，即可以利用存储层的索引优 阅读全文

摘要：SparkStreaming开启了checkpoint wal后有时会出现如上报错，但不会影响整体程序，只会丢失报错的那个job的数据。其根本原因是wal文件被删了，被sparkstreaming自己的清除机制删掉了。通常意味着一定程度流式程序上存在速率不匹配或堆积问题。 查看driver日志可发现 阅读全文

摘要：背景 Selenium 是一个Web自动化测试的组件，可基于WebDriver去控制弹出浏览器去做一系列Web点击或行为测试（当然也可以去做一些邪恶的事。。），减少重复人工网页测试的开销。BrowserMobProxy相当于一层代理，它配合Selenium使用可以在Selenium控制浏览器访问之前 阅读全文

摘要：吐槽一下，苹果的质量管控越来越差了。 macOS Sierra有时突然或升级后会遇到wifi不停重连连不上问题，现象为不停地连接wifi。 网上有人说删除 /Library/Preferences/SystemConfiguration 下的相关配置就可以了，有的说只需要删除bluetooth那个， 阅读全文

摘要：As we all know , up to Spark 1.6.2, JavaSparkContext only provides two kinds of accumulators: Integer and Double. However, unfortunately I've met with 阅读全文