商丘做网站,商丘网站优化,商丘网络推广,商丘网络公司
当前位置:首页 > 新闻资讯 > 网站优化 >

分析两个有特点网站的robots.txt写法

发表日期:2018-03-09 11:48聚圣源浏览次数: 本文关键词:分析,两个,有,特,点网,站seo,robots.txt,写

分析两个有特点网站的robots.txt写法

近几日有不少朋友反应,他们看了很多大站,robots的写法也是各有不同,有的不知道为什么要这么写,这样写robots针对seo的意义在哪里?

  今天seo知否小编分析2个站点,为大家详细解释,下面是干货时间:

  seo视频教程:robots.txt写法

  首先,咱们先看这个站点,他的robots写法是:

分析两个有特点网站的robots.txt写法

  红框括起来的,一看就知道这个站点是dedecms搭建的。下面还有2个就是站长本人创建。重点说一下:

  Disallow: /*?* 解释:url中只要包含了问号(“?”),那么将屏蔽蜘蛛的抓取

  Disallow: /*list* 解释:url中只要包含了list字符(“list”),那么将屏蔽蜘蛛的抓取

  详细解读:

  第一个,为什么屏蔽带“?”的url:因为带“?”的url都是动态地址,对搜索引擎并不友好,都晓得静态地址是对seo排名最好的。所以屏蔽带“?”的url是必须的。

  第二个,为什么屏蔽url中只要包含了list字符:因为带list的url,一般都是列表页,列表页都会有很多分页,而有分页的话,这些页面有一个共同点:title基本都是相同的,只是末尾会有不同的“第几页”,而这样会被搜索认为都是重复title,所以必须屏蔽。

  再来看一个大站,2345电影站,他的robots:

分析两个有特点网站的robots.txt写法

  大站的一个共同点:都屏蔽了带“?”url的抓取。而且屏蔽了:Disallow: /search_* 搜索结果页面的抓取。其他的不做多解释,屏蔽的目的只有一个:这些页面不想被搜索收录,因为这些页面不在参与排名的页面当中。

  再扩展点讲讲:当你要做某个网站时,网站搭建之初,网站关键词挖掘,布局,参与排名的页面(url)都有哪些,站内优化,站外优化的方式是什么。这些问题,在网站建设前就要部署计划好。所以说seo也是一个系统的工程。(成功之前,是要有准备、有铺垫。)

如没特殊注明,文章均来自网络! 转载请注明来自:http://www.jushengyuan.com.cn/news/wzyh/9973.html

网站设计案例推荐

热门文章

商丘做网站的公司:展柜设计网...

网络推广人员在进行SEO优化这一长期而系统的工程时,会出现一些在日常生活中常见但与优化中的意义完全不同的词语,读来让人倍感神秘而又十分有趣,现在就让小编带你去感受一下这些“神...

日期:2018-04-19 浏览次数:2228

2018年发博客外链对SEO还有效果吗...

博客群发软件可以让SEO外链员轻松了不少,自动或半自动化操作确实很方便。然而,随着百度算法的更新,这些博客群发软件产出的外链变得毫无价值,被称为了垃圾外链,不仅对网站...

日期:2018-03-19 浏览次数:2090

商丘SEO指南:如何快速制定一份...

如果你是一家初创公司,这意味着你的资源有限,当然你迫切需要客户,又想低成本的获取潜在的用户,那么最好的选择就是搜索引擎优化,其实它并不复杂,自然搜索流量往往会带来...

日期:2018-07-25 浏览次数:1734

SEO外链优化策略:你还只看重收...

经常听到有人说SEO外链操作没用了,反正不管有没有用,岑辉宇依然每天坚持给自己的博客发布外链,效果的话仁者见仁智者见智了。很多人觉得发布外链没有用的原因,可能是因为搜...

日期:2018-03-12 浏览次数:1454

关于如何做好企业站SEO的日常工...

所谓知己知彼百战不殆,首先一定要知道自家站点的SEO综合信息,知道目前站点收录怎么样,当前的主词百度排名,友链状态,外链情况,另外可以用第三方的统计代码来查看自家站点...

日期:2018-09-19 浏览次数:1409

相关文章

「沙河市seo」SEO优化网站排名优...

在SEO优化 历程中要充实相识搜刮引擎的需求,服从搜刮引擎所划定的相应规矩,在规矩范畴内只管往搜刮引擎所必要的目的与效果偏向优...

日期:2019-07-24 浏览次数:64

「蓬莱市seo」熊掌号收录没排名...

起首我们先来明白一下如今排名即是什么,排名=熊掌号运营指数+SEO技能。 也就是说你必要做两部门事情才气得到好的排名,偕行之间竞...

日期:2019-07-24 浏览次数:69

「哲学木盟seo」电子商务关键词...

怎样有用地开展电子商务要害词研究 要害词研究是每个SEO计谋的底子。做得好,它为您应该优化的内容范例提供偏向。 另一方面,具有糟...

日期:2019-07-24 浏览次数:65

「攀枝花市网站建设」小程序...

1、微信搜刮推广入口渠道,做小步伐SEO (免费) 小步伐与民众号一样,名称具有唯一性,谁先注册,谁先利用,背面的人就无法再利用这个...

日期:2019-07-24 浏览次数:69

「金湖县seo」企业网站推广SEO网...

网站推广 要害词可以或许为企业带来更多的流量,互联网生长至今,很大水平上影响人们的一样平常生存,一旦我们有题目必要办理时,...

日期:2019-07-06 浏览次数:63

随机推荐

什么是搜索引擎更新频次?怎么看...

一个完整的seo技术流程概论包括...

提高网站收录和排名的方法有哪...

三大类站点关键词 各位SEOer知道...

新形势下外链建设该如何下手:...

SEO优化难于上青天?HITS链接算法...