网站首页 > 网站优化使用robots协议的注意事项
来源:合肥网站优化 发布时间:2016/3/21 浏览次数:1557次
合肥网站优化的小编在制作网站和优化网站的过程中,非常重视基础工作,而作为robots协议文件便是一个网站必不可少的关键。下面,我们就一起来看一下其中网站优化使用robots协议的注意事项。
很多新手建站朋友对robots协议文件的重要性不是很清楚,这里,合肥网站优化的小编就来告诉您,robots协议(也称为爬虫协议、机器人协议等)的全称是“网络爬虫排除标准”(Robots Exclusion Protocol),网站通过robots协议告诉搜索引擎哪些页面可以抓取,哪些页面不能抓取。
1、指令区分大小写,忽略未知指令。
2、每一行代表一个指令,空白和隔行会被忽略。
3、“#”号后的字符参数会被忽略。
4、有独立User-agent的规则,会排除在通配“*”User agent的规则之外。
5、可以写入sitemap文件的链接,方便搜索引擎蜘蛛爬行整站内容。
6、尽量少用Allow指令,因为不同的搜索引擎对不同位置的Allow指令会有不同看待。
7、robots.txt文件必须放在网站的根目录,不可以放在子目录。
robots协议对于网站优化具有非常重要的意义,可不要忽视哦,以上就是合肥网站优化小编的介绍,希望会为您带来帮助,更多内容请详细浏览http://www.zosyo.com/
>> 相关文章:
·做SEO提高排名有哪些关键和重要的工作?·安徽合肥网络公司怎样轻松做好SEO优化
·合肥网站优化如何做好内链优化
·如何使合肥seo优化提高长期有效的关键词稳定性排序方法?
·合肥网站制作从需求分析到上线交付
·安徽seo优化有关标题优化的影响
·合肥网站建设告诉你什么是响应式网站
·如何让安徽合肥网络公司在网站中快速提高网站排名?
·安徽网站制作如何实现网站的全面定制?
·合肥网站制作如何规划网站内容
·安徽seo优化公司教新手必须掌握网站优化的技巧
·关于网站建设过程中的一些改进细节问题
·安徽网站优化公司如何在百度搜索结果大词轮流显示做好优化工作
·如何优化合肥网站?
·安徽SEO优化如何让网站提高收录
·合肥网站制作网站的统一性如何实现
·安徽seo优化公司:seo优化不同网站
·网页的创建需要各种工作和技术的参与
·合肥网站建设公司教你如何拍摄高质量的短片
·安徽seo优化如何应对搜索引擎的更新
·哪家专业网页设计公司比较好,如何选择?