会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
FireSpider 火蜘蛛采集器
博客园
首页
新随笔
联系
订阅
管理
[置顶]
使用火蜘蛛采集器Firespider采集天猫商品数据并上传到微店
摘要: 有很多朋友都需要把天猫的商品迁移到微店上去。可在天猫上的商品数据非常复杂,淘宝开放接口禁止向外提供数据,一般的采集器对ajax数据采集的支持又不太好。还有现在有了火蜘蛛采集器,经过一定的配置,终于把天猫商品的数据都采集下来了(SKU信息,运费信息,库存信息,图片,商品描述等)。天猫商品网页的确是很复...
阅读全文
posted @ 2014-11-06 00:15 rezy
阅读(6189)
评论(6)
推荐(4)
2018年12月12日
Mac Android8.0源码编译笔记
摘要: 原因:内存不够办法:添加限制,输入如下命令:export JACK_SERVER_VM_ARGUMENTS="-Dfile.encoding=UTF-8 -XX:+TieredCompilation -Xmx4g"./prebuilts/sdk/tools/jack-admin kill-serve
阅读全文
posted @ 2018-12-12 22:37 rezy
阅读(328)
评论(0)
推荐(0)
2016年8月10日
开源 高性能 高可用 可扩展
摘要: 开源 高性能 高可用 可扩展
阅读全文
posted @ 2016-08-10 16:08 rezy
阅读(234)
评论(0)
推荐(0)
开源 模式
摘要: 开源 模式
阅读全文
posted @ 2016-08-10 16:07 rezy
阅读(153)
评论(0)
推荐(0)
开源 算法 数据结构
摘要: MySQL b+tree mvcc Write-Ahead Logging (WAL) http://www.cnblogs.com/wenBlog/p/4423497.html http://www.cnblogs.com/CareySon/archive/2012/01/29/2331088.h
阅读全文
posted @ 2016-08-10 15:45 rezy
阅读(210)
评论(0)
推荐(0)
2016年7月27日
mdb
摘要: 计划开发高性能KV数据库, 学习MongoDB leveldb innodb, 练手贴+日记贴: http://bbs.chinaunix.net/thread-4244870-1-1.html 超高性能网络编程, Asynchronous network I/O http://bbs.chinau
阅读全文
posted @ 2016-07-27 18:55 rezy
阅读(1299)
评论(0)
推荐(0)
[转][译] 存储引擎原理:LSM
摘要: 原译文地址:http://www.tuicool.com/articles/qqQV7za http://www.zhihu.com/question/19887265 http://blog.csdn.net/v_july_v/article/details/7526689 http://blog
阅读全文
posted @ 2016-07-27 15:29 rezy
阅读(6538)
评论(2)
推荐(3)
2016年6月15日
Java 理论与实践: 正确使用 Volatile 变量
摘要: http://www.ibm.com/developerworks/cn/java/j-jtp06197.html Java™ 语言包含两种内在的同步机制:同步块(或方法)和 volatile 变量。这两种机制的提出都是为了实现代码线程的安全性。其中 Volatile 变量的同步性较差(但有时它更简
阅读全文
posted @ 2016-06-15 12:41 rezy
阅读(282)
评论(0)
推荐(0)
单例模式、双检测锁定DCL、volatile(转)
摘要: 单例模式最要关心的则是对象创建的次数以及何时被创建。 Singleton模式可以是很简单的,它的全部只需要一个类就可以完成(看看这章可怜的UML图)。但是如果在“对象创建的次数以及何时被创 建”这两点上较真起来,Singleton模式可以相当的复杂,比头五种模式加起来还复杂,譬如涉及到DCL双锁检测
阅读全文
posted @ 2016-06-15 12:39 rezy
阅读(406)
评论(0)
推荐(0)
2016年5月30日
网络编程释疑之:单台服务器上的并发TCP连接数可以有多少
摘要: 曾几何时我们还在寻求网络编程中C10K问题的解决方案,但是现在从硬件和操作系统支持来看单台服务器支持上万并发连接已经没有多少挑战性了。我们先假设单台服务器最多只能支持万级并发连接,其实对绝大多数应用来说已经远远足够了,但是对于一些拥有很大用户基数的互联网公司,往往面临的并发连接数是百万,千万,甚至腾
阅读全文
posted @ 2016-05-30 23:29 rezy
阅读(1360)
评论(0)
推荐(0)
单机并发连接数研究
摘要: 系统用一个4四元组来唯一标识一个TCP连接:{local ip, local port,remote ip,remote port}。 client每次发起tcp连接请求时,除非绑定端口,通常会让系统选取一个空闲的本地端口(local port),该端口是独占的,不能和其他tcp连接共享。tcp端口
阅读全文
posted @ 2016-05-30 23:24 rezy
阅读(1157)
评论(0)
推荐(0)
下一页
公告