一、搜索引擎
1、蜘蛛访问网站时都会先访问网站根目录下的 robots.txt 文件。
2、蜘蛛喜欢访问经常更新的页面。
3、离首页点击距离越近，页面权重越高。
4、使用“” + 关键词的方法可以找到特定关键词的竞争对手
