2011 年 8月 25 日随笔档案 - tudou@NorthWind

用HttpClient来模拟浏览器GET,POST

摘要：一般的情况下我们都是使用IE或者Navigator浏览器来访问一个WEB服务器，用来浏览页面查看信息或者提交一些数据等等。所访问的这些页面有的仅仅是一些普通的页面，有的需要用户登录后方可使用，或者需要认证以及是一些通过加密方式传输，例如HTTPS。目前我们使用的浏览器处理这些情况都不会构成问题... 阅读全文

posted @ 2011-08-25 22:45 tudou@NorthWind 阅读(2274) 评论(0) 推荐(0)

java实现自动登录，并获取数据

摘要：为抓取 web的一些隐私数据，需要先登录，然后才能获取这些数据，用程序来实现，就需要实现自动登录，然后将登录信息保存在Cookie中，以便取得数据时，无须再次登录。以网易邮箱为例：所需jar包：commons-codec-1.3.jar ， common-httpclient-3.0.1.jar ... 阅读全文

posted @ 2011-08-25 22:44 tudou@NorthWind 阅读(7948) 评论(1) 推荐(3)

使用seconds_behind_master和mk-heartbeat 检查MySQL数据库主从延时

摘要：日常工作中，对于MySQL主从复制检查，一方面我们要保证复制的整体结构是否正常，另一方面需要检查主从数据是否保持一致。对于前者我们可以通过监控复制线程是否工作正常以及主从延时是否在容忍范围内，对于后者则可以通过分别校验主从表中数据的md5码是否一致，来保证数据一致，可以使用Maatkit工具包... 阅读全文

posted @ 2011-08-25 18:15 tudou@NorthWind 阅读(1831) 评论(0) 推荐(0)

2011年8月25日

公告