|
主题:关于蜘蛛访问时的规则问题? |
|
|
|
|
|
|
|
 |
等级: SEO童生 |
| 发贴: 1 |
| 积分: 3 |
| 经验: 3 |
| 体力: 159 |
| 货币: 0 乔币 |
| 注册: 2007-11-09 |
|
|
|
关于蜘蛛访问时的规则问题? |
我采集了3000篇文章,属性为隐藏。现在我想以每天20篇左右的进度逐渐把文章属性改为显示。
我现在把3000篇文章都全部生成了静态。不过前台并没有全部显示。
现在我想问一下。蜘蛛程序访问时,是只访问前台所显示的网页文件吗?还是只要我生成了静态,不在前台显示的文件也会被蜘蛛访问到?
|
|
| -------------------------------------------------------- |
|
|
|
2008-2-12 10:04:59 |
|
|
|
|
| 版主 |
  |
|
 |
|
 |
等级: SEO探花 |
| 发贴: 242 |
| 积分: 302 |
| 经验: 508 |
| 体力: 1586 |
| 货币: 0 乔币 |
| 注册: 2007-09-09 |
|
|
|
|
| 从理论上讲蜘蛛是访问不到你的后台的,他只能够向服务器发出访问请求,获得后台文件的地址,但是没办法进入你的操作界面.你采集的文章属性设为隐藏,不知道你是怎么隐藏的,是不是只保存在后台而没有在前台发布,如果这样的话不用担心蜘蛛能抓取.如果只是在代码中加入hide属性的话估计蜘蛛能够抓取,因为HIDE属性只对真实浏览用户有效. |
|
| -------------------------------------------------------- |
|
起点博客非主流图片 |
|
|
2008-2-12 11:21:34 |
|
|
|
|
|
   |
|
 |
|
 |
等级: SEO探花 |
| 发贴: 413 |
| 积分: 457 |
| 经验: 849 |
| 体力: 4758 |
| 货币: 0 乔币 |
| 注册: 2007-11-27 |
|
| 浏览“漫步赵”的博客圈 |
|
|
|
|
| 又向老猫学会了一点东西 |
|
| -------------------------------------------------------- |
呢噜怪怪熊
|
|
|
2008-2-12 14:24:18 |
|
|
|
|
|
|
|
| 学习了 |
|
| -------------------------------------------------------- |
|
完美世界私服 传奇私服 |
|
|
2008-2-13 8:51:39 |
|
|
|
|
|
 |
|
 |
|
 |
等级: SEO探花 |
| 发贴: 207 |
| 积分: 229 |
| 经验: 425 |
| 体力: 1455 |
| 货币: 0 乔币 |
| 注册: 2007-11-22 |
|
|
|
|
| 我也是,老猫是好人。 |
|
|
|
|
2008-2-14 19:45:34 |
|
|
|
状态: |
|
|
|