智能手机访问入口 diglog.com/m

详解robots.txt和Robots META标签

尤来尤去 提交于2006-10-25 11:06:39

标签 robots.txt Robots META 

对于网站管理者和内容提供者来说，有时候会有一些站点内容，不希望被ROBOTS抓取而公开。为了解决这个问题，ROBOTS开发界提供了两个办法：一个是robots.txt，另一个是The Robots META标签。


一、 robots.txt

1、 什么是robots.txt？

　　robots.txt是一个纯文本文件，通过在这个文件中声明该网站中不想被robots访问的部分，这样，该网站的部分或全部内容就可以不被搜索引擎收录了，或者指定搜索引擎只收录指定的内容。
【点击进入链接 http://www.dzhai.com/blog/article.asp?id=145 】

详解robots.txt和Robots META标签

 

发表评论 | 收藏 | 埋葬!

收藏到   del.icio.us | QQ书签 | 百度搜藏 | Mister-Wong
分享地址


正在加载评论...
发表评论

* 昵称:

博客(可不填写):

*您的评论:
高兴悲伤 惊讶 挂掉! 困惑 冷静 气愤 尴尬 受不了啦 转动眼睛 眨眼 睡梦中     

*输入验证码: