Argo
我的地盘Ajax做主
posts - 6, comments - 37, trackbacks - 0, articles - 2
博客园
::
首页
::
新随笔
::
联系
::
订阅
::
管理
ASP.NET
Request.Browser.Crawler 属性的工作原理分析。
摘要: 昨天同事问我如何判断一个请求是否为搜索引擎,我的回答是通过UserAgent字符串自己去判断,而他告诉我.net提供了Crawler属性。我还真没有使用过这个属性,但是我第一反应是微软做的这东西怎么可能把所有搜索引擎都能判断出来呢?这是不可能的阿,至少据我所知网络中还有很多“特殊的搜索引擎”比如说Email的爬虫。我想研究一下什么样特征的搜索引擎能够让Crawler属性为真。
阅读全文
posted @
2008-01-12 12:47
Argo 阅读(1872) |
评论 (10)
编辑
|
Powered by:
博客园
Copyright © Argo
日历
<
2012年2月
>
日
一
二
三
四
五
六
29
30
31
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
1
2
3
4
5
6
7
8
9
10
公告
昵称:
Argo
园龄:
4年1个月
粉丝:
0
关注:
0
搜索
常用链接
我的随笔
我的评论
我的参与
最新评论
我的标签
更多链接
随笔分类
(5)
ASP.NET(1)
ASP.NET AJAX(2)
VS.NET 技术(1)
Web Services(1)
随笔档案
(6)
2009年7月 (2)
2008年1月 (4)
Friends
Space
TerryDong
最新评论
阅读排行榜
评论排行榜
推荐排行榜