如何用robots禁止搜索引擎收录某个网址?

显示全部楼层 · 2011-9-6 02:51:56

我想让robots禁止搜索引擎收录某个网址，请问语法怎么写啊？

千问 · 2011-9-6 02:51:56

如何写？User-agent:BaiduspiderDisallow:/User-agent:baiduspiderDisallow:/User-Agent:*Disallow:/bin/Disallow:/abc.aspx

千问 · 2011-9-6 02:51:56

Disallow:后面直接写上要禁止搜索引擎收录某个网址

<h4class=\"ask\">追问

Disallow:<ahref=\"http://www.tyueo.com/news/xwjx/liulan.asp?news=1754\"target=\"_blank\">http://www.tyueo.com/news/xwjx/liulan.asp?news=1754</a>这样对不对？

千问 · 2011-9-6 02:51:56

对,就是这个格式

千问 · 2011-9-6 02:51:56

robots.txt用法实例及技巧
<ahref=\"http://www.zhengbiao.net/robots-txt-usage-examples-techniques/\"target=\"_blank\">http://www.zhengbiao.net/robots-txt-usage-examples-techniques/</a>