设为首页收藏本站
开启辅助访问 切换到窄版
搜索
第一问答网»论坛 › 中问网 › 问答 › 网站同时收录静态页面与动态页面，robots要怎么写，这么 ...

网站同时收录静态页面与动态页面，robots要怎么写，这么写行吗

[复制链接]
查看14 | 回复14 | 2013-3-3 06:54:11 | 显示全部楼层 |阅读模式
到SEO培训：SEOWHY网站查看提问详情>>
回复

使用道具 举报

千问 | 2013-3-3 06:54:11 | 显示全部楼层

回复

使用道具 举报

千问 | 2013-3-3 06:54:11 | 显示全部楼层

回复

使用道具 举报

千问 | 2013-3-3 06:54:11 | 显示全部楼层
User-agent: *
Disallow: /api/
Disallow: /data/
Disallow: /source/
Disallow: /install/
Disallow: /template/
Disallow: /config/
Disallow: /uc_client/<br/>这种格式，中间要有空格，后面是网站目录，屏蔽所有搜索引擎蜘蛛，如果只屏蔽百度。User-agent: *
改成 百度蜘蛛<br/>
回复

使用道具 举报

千问 | 2013-3-3 06:54:11 | 显示全部楼层

回复

使用道具 举报

千问 | 2013-3-3 06:54:11 | 显示全部楼层

回复

使用道具 举报

千问 | 2013-3-3 06:54:11 | 显示全部楼层

回复

使用道具 举报

千问 | 2013-3-3 06:54:11 | 显示全部楼层
不用加网址 屏蔽跟目录以下所要屏蔽的网址就行了




       
                到SEO培训：SEOWHY网站查看回答详情>>
回复

使用道具 举报

千问 | 2013-3-3 06:54:11 | 显示全部楼层

回复

使用道具 举报

千问 | 2013-3-3 06:54:11 | 显示全部楼层

回复

使用道具 举报

12下一页
返回列表 发新帖
高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

千问

主题

0

回帖

4882万

积分

论坛元老

Rank: 8Rank: 8

积分
48824836
回复楼主 返回列表
热门排行