商丘做网站,商丘网站优化,商丘网络推广,商丘网络公司
当前位置:首页 > 新闻资讯 > 网站优化 >

分析两个有特点网站的robots.txt写法

发表日期:2018-03-09 11:48聚圣源浏览次数: 本文关键词:分析,两个,有,特,点网,站seo,robots.txt,写

分析两个有特点网站的robots.txt写法

近几日有不少朋友反应,他们看了很多大站,robots的写法也是各有不同,有的不知道为什么要这么写,这样写robots针对seo的意义在哪里?

  今天seo知否小编分析2个站点,为大家详细解释,下面是干货时间:

  seo视频教程:robots.txt写法

  首先,咱们先看这个站点,他的robots写法是:

分析两个有特点网站的robots.txt写法

  红框括起来的,一看就知道这个站点是dedecms搭建的。下面还有2个就是站长本人创建。重点说一下:

  Disallow: /*?* 解释:url中只要包含了问号(“?”),那么将屏蔽蜘蛛的抓取

  Disallow: /*list* 解释:url中只要包含了list字符(“list”),那么将屏蔽蜘蛛的抓取

  详细解读:

  第一个,为什么屏蔽带“?”的url:因为带“?”的url都是动态地址,对搜索引擎并不友好,都晓得静态地址是对seo排名最好的。所以屏蔽带“?”的url是必须的。

  第二个,为什么屏蔽url中只要包含了list字符:因为带list的url,一般都是列表页,列表页都会有很多分页,而有分页的话,这些页面有一个共同点:title基本都是相同的,只是末尾会有不同的“第几页”,而这样会被搜索认为都是重复title,所以必须屏蔽。

  再来看一个大站,2345电影站,他的robots:

分析两个有特点网站的robots.txt写法

  大站的一个共同点:都屏蔽了带“?”url的抓取。而且屏蔽了:Disallow: /search_* 搜索结果页面的抓取。其他的不做多解释,屏蔽的目的只有一个:这些页面不想被搜索收录,因为这些页面不在参与排名的页面当中。

  再扩展点讲讲:当你要做某个网站时,网站搭建之初,网站关键词挖掘,布局,参与排名的页面(url)都有哪些,站内优化,站外优化的方式是什么。这些问题,在网站建设前就要部署计划好。所以说seo也是一个系统的工程。(成功之前,是要有准备、有铺垫。)

如没特殊注明,文章均来自网络! 转载请注明来自:http://www.jushengyuan.com.cn/news/wzyh/9973.html

网站设计案例推荐

热门文章

商丘做网站的公司:展柜设计网...

网络推广人员在进行SEO优化这一长期而系统的工程时,会出现一些在日常生活中常见但与优化中的意义完全不同的词语,读来让人倍感神秘而又十分有趣,现在就让小编带你去感受一下这些“神...

日期:2018-04-19 浏览次数:2223

2018年发博客外链对SEO还有效果吗...

博客群发软件可以让SEO外链员轻松了不少,自动或半自动化操作确实很方便。然而,随着百度算法的更新,这些博客群发软件产出的外链变得毫无价值,被称为了垃圾外链,不仅对网站...

日期:2018-03-19 浏览次数:2089

商丘SEO指南:如何快速制定一份...

如果你是一家初创公司,这意味着你的资源有限,当然你迫切需要客户,又想低成本的获取潜在的用户,那么最好的选择就是搜索引擎优化,其实它并不复杂,自然搜索流量往往会带来...

日期:2018-07-25 浏览次数:1731

SEO外链优化策略:你还只看重收...

经常听到有人说SEO外链操作没用了,反正不管有没有用,岑辉宇依然每天坚持给自己的博客发布外链,效果的话仁者见仁智者见智了。很多人觉得发布外链没有用的原因,可能是因为搜...

日期:2018-03-12 浏览次数:1450

关于如何做好企业站SEO的日常工...

所谓知己知彼百战不殆,首先一定要知道自家站点的SEO综合信息,知道目前站点收录怎么样,当前的主词百度排名,友链状态,外链情况,另外可以用第三方的统计代码来查看自家站点...

日期:2018-09-19 浏览次数:1405

相关文章

「金湖县seo」企业网站推广SEO网...

网站推广 要害词可以或许为企业带来更多的流量,互联网生长至今,很大水平上影响人们的一样平常生存,一旦我们有题目必要办理时,...

日期:2019-07-06 浏览次数:60

「高平市seo」为什么网站排名长...

公主岭 网站排名 对付网站运营职员是一件很认识的事变,网站SEO优化比力紧张的一步那就是更新内容。不相识网站排名规矩的人会迷惑,...

日期:2019-07-06 浏览次数:60

「隆回县网站建设」网站如何优...

一个网站乐成创建以后,另有一个很大的愿景,那就想网站在乐成创建并上线以后,可以或许拥有很好的排名,面临如许的题目时,网站...

日期:2019-07-06 浏览次数:60

「南乐县网站建设」企业网站...

网站SEO优化数据阐发是每个优化职员紧张的事情之一,在要害词阐发的事情中,我们还要做要害词相干数据整理和归纳,而且保障长尾要...

日期:2019-07-06 浏览次数:60

「彭阳县网站建设」SEO优化中网...

在SEO优化的历程和效果中,无论是专业的SEOer照旧一些非专业的客户网站治理者,对网站要害词的排名都是非常体贴的。常常会有人问相干...

日期:2019-07-06 浏览次数:60

随机推荐

SEO经验分享:你是否真的理解动态...

SEO推广怎么做?上海雅晟广告传...

原创软文中关键词密度很重要...

新手必读:如何选择域名更有利...

浅谈SEO关键词排名的匹配原理...

企业网站SEO优化提升关键词排名...