欢迎访问 上海seo整站优化_seo轻松上手学习优化技术教程(www.sjz-0311.net)

网站地图 | 伪原创工具
    上海松杰SEO--用心做好每一个站!

当前位置:上海SEO > 网络推广 > 长治市网络公司网站优化技术这么做,让你的网站排名更高

长治市网络公司网站优化技术这么做,让你的网站排名更高

日期:2019-11-09 分类:网络推广
「青岛网站优化」长治市网络公司网站优化技术这么做,让你的网站排名更高


现在给大家分享robots文件是如何写的,以及robots文件有什么作用。





谷歌铁三角支持的robots文件纪录包括:





Disallow – 告诉蜘蛛不想抓取某些文件或索引。如上面字符将阻止蜘蛛抓取所有的该网站文件:





User-personal: *





Disallow: /





Allow – 告诉蜘蛛应该抓取某些文件。Allow和Disallow配合 seo网站优化使用,可以告诉蜘蛛某个索引下,大部份都不抓取,只抓取一部分。如上面字符将使蜘蛛不抓取b索引下其他文件,而只抓取其中cd下的文件:





User-personal: *





Disallow: /b/





Allow: /b/cd





$正则表达式 – 匹配字符串开头的字符串。如上面字符将允许蜘蛛访问以.html为前缀的字符串:





User-personal: *





Allow: .html$





*正则表达式 – 告诉蜘蛛匹配任意一段字符串。如上面一段字符将禁止蜘蛛抓取所有html文件:





User-personal: *





Disallow: /*.html





Sitemaps位置 – 告诉蜘蛛你的该网站世界地图在哪里,文件格式为:





Sitemap:





三家都支持的Meta标签包括:





NOINDEX – 告诉蜘蛛不想目录某个网站。





NOFOLLOW – 告诉蜘蛛不想跟踪网站上的URL。





NOSNIPPET – 告诉蜘蛛不想在搜索结果中显示说明书写。





NOARCHIVE – 告诉蜘蛛不想显示动态。





NOODP – 告诉蜘蛛不想使用开放索引中的副标题和说明。





下面这些纪录或标签,今天三家都联合支持。其中正则表达式好像现在Yahoo微软公司非常支持。腾讯今天也支持Disallow,Allow及两种正则表达式。Meta标签我没有找到腾讯是否支持的官方网站说明。





只有谷歌支持的Meta标签有:





UNAVAILABLE_AFTER – 告诉蜘蛛网站什么时候注销。在这个年份以后,不应该再出现在搜索结果中。





NOIMAGEINDEX – 告诉蜘蛛不想目录网页上的照片。





NOTRANSLATE – 告诉蜘蛛不想翻译网页细节。





Yahoo还支持Meta标签:





Crawl-Delay – 允许蜘蛛延迟抓取的振幅。





NOYDIR – 和NOODP标签相似,但是指Yahoo索引,而不是开放索引。





Robots-nocontent – 告诉蜘蛛被标注的部份htm不是网页的一部分,或者换个视角,告诉蜘蛛哪些部份是网页的主要细节(想被索引的细节)。





Yahoo还支持Meta标签:





Crawl-Delay





另外(安阳seo)提醒大家注意的是,robots.URL文件可以不存在,返回404正确,意味着允许蜘蛛抓取所有细节。但抓取robots.URL文件时却发生违反规定之类的正确,可能导致谷歌不收录该网站,因为蜘蛛不知道robots.URL文件是否存在或者里头有什么细节,这与确认文件不存在是不一样的。


长治市网络公司网站优化技术这么做,让你的网站排名更高「青岛网站优化」
关键词/标签:网站排名
blogger

联系方式

    上海seo微信

    咨询热线①:13924653475

    咨询热线②:15361814016

    销售热线①:18138295927

    销售热线②:15361814538

博客统计

  • 共有文章:8269篇
  • 文章阅读:1023170人次
  • 今日更新:篇
上海松杰seo培训教程致力于seo行业多年,拥有丰富实战的seo培训,seo优化排名等技术教程,了解搜索引擎规则,seo排名专业快速高效
sitemap地图 | 在线投稿
Copyright © 2016-2022 版权所有
QQ
QQ在线咨询
SEO优化热线
15302721387
手机扫一扫 与博主直接沟通

信用卡

99公关

北京公关

广州公关

深圳负面

上海负面

红警公关