-
采集系统模块和难点
摘要:采集配置模块: 管理单任务配置文件和蜘蛛配置文件, 比较繁琐, 没有太多难点. 采集内核模块: URL管理模块- 因为采集过程需要知道几个URL队列, 如已采集队列, 待采集队列, 采集去重队列. 已采集队列负责已经抓取到的URL列表. 待采集队列负责已经发现, 等待采集的URL列表. 采集去重队列负责已采集和已经发现的URL列表集合, 这样确保不重复收集URL. 咱们目前...
阅读全文
-
问朋缘系列 - ISO的失败
摘要:随手翻了下书架, 寻下这段故事给一个朋友. 他比我更需要它. Y公司终于在2001年发现管理跟不上了,于是开始引进ISO质量认证体系,希望通过这个体系来规范管理行为,提高产品质量和对外的竞争力。 他们做得非常认真,把全公司的人员都调动起来了。他们将质量手册的论证做到了每一个员工;按照标准的软件工程模型进行了开发流程的重组;每一份流程相关的材料都约定了格式,并进行了归档说明...
阅读全文
-
21天C# ASP.NET笔记 第一天 , 1/20
摘要:21天C# ASP.NET笔记 第一天: ASP服务器控件. Label控件 比较简单, 就是显示. TextBox控件 显示或者输入文本 Code1 : TextBox控件在多行显示状态下限制最大字数, 包括屏蔽粘贴. 后台: protected void Page_Load(object sender, EventArgs e) { Content.Attri...
阅读全文
-
SqlSever数据库连接类
摘要:using System;using System.Data;using System.Data.SqlClient;using System.Collections;using System.Configuration;using System.Web;using System.Web.Security;using System.Web.UI;using System.Web.UI.WebCo...
阅读全文
-
简单的线程池, 模版用
摘要:线程池在VS2005中似乎没有数量限制, 但是WaitHandle.WaitAll()函数限制64线程. 需要超过的话可以使用嵌套线程. PS资料:CodeProject一篇关于线程池数量限制的文章. Changing the default limit of 25 threads of ThreadPool class using System;using System.Threading;...
阅读全文
-
C#的第一次代码地震 2006-12-06 23:44:57
摘要:今天开始了一部分C#的桌面程序向Web迁徙, 发现ASP.NET和桌面开发时候很相似, 也有一部分问题. 1. unsafe代码不再能用了. 2. 基本上关于file代码不再能用了. 3. CSDN & RSS READER转移到了WEB, 可是遇到了结构的缺陷. 我想加入分数排序功能, 但是因为当时没有注意这个需求, 现在面临一个代码地震... 因为是动态解析页面源码实现的, 所以和...
阅读全文
|