商丘做网站,商丘网站优化,商丘网络推广,商丘网络公司
当前位置:首页 > 新闻资讯 > 网站优化 >

分析两个有特点网站的robots.txt写法

发表日期:2018-03-09 11:48聚圣源浏览次数: 本文关键词:分析,两个,有,特,点网,站seo,robots.txt,写

分析两个有特点网站的robots.txt写法

近几日有不少朋友反应,他们看了很多大站,robots的写法也是各有不同,有的不知道为什么要这么写,这样写robots针对seo的意义在哪里?

  今天seo知否小编分析2个站点,为大家详细解释,下面是干货时间:

  seo视频教程:robots.txt写法

  首先,咱们先看这个站点,他的robots写法是:

分析两个有特点网站的robots.txt写法

  红框括起来的,一看就知道这个站点是dedecms搭建的。下面还有2个就是站长本人创建。重点说一下:

  Disallow: /*?* 解释:url中只要包含了问号(“?”),那么将屏蔽蜘蛛的抓取

  Disallow: /*list* 解释:url中只要包含了list字符(“list”),那么将屏蔽蜘蛛的抓取

  详细解读:

  第一个,为什么屏蔽带“?”的url:因为带“?”的url都是动态地址,对搜索引擎并不友好,都晓得静态地址是对seo排名最好的。所以屏蔽带“?”的url是必须的。

  第二个,为什么屏蔽url中只要包含了list字符:因为带list的url,一般都是列表页,列表页都会有很多分页,而有分页的话,这些页面有一个共同点:title基本都是相同的,只是末尾会有不同的“第几页”,而这样会被搜索认为都是重复title,所以必须屏蔽。

  再来看一个大站,2345电影站,他的robots:

分析两个有特点网站的robots.txt写法

  大站的一个共同点:都屏蔽了带“?”url的抓取。而且屏蔽了:Disallow: /search_* 搜索结果页面的抓取。其他的不做多解释,屏蔽的目的只有一个:这些页面不想被搜索收录,因为这些页面不在参与排名的页面当中。

  再扩展点讲讲:当你要做某个网站时,网站搭建之初,网站关键词挖掘,布局,参与排名的页面(url)都有哪些,站内优化,站外优化的方式是什么。这些问题,在网站建设前就要部署计划好。所以说seo也是一个系统的工程。(成功之前,是要有准备、有铺垫。)

如没特殊注明,文章均来自网络! 转载请注明来自:http://www.jushengyuan.com.cn/news/wzyh/9973.html

网站设计案例推荐

热门文章

商丘做网站的公司:展柜设计网...

网络推广人员在进行SEO优化这一长期而系统的工程时,会出现一些在日常生活中常见但与优化中的意义完全不同的词语,读来让人倍感神秘而又十分有趣,现在就让小编带你去感受一下这些“神...

日期:2018-04-19 浏览次数:2218

2018年发博客外链对SEO还有效果吗...

博客群发软件可以让SEO外链员轻松了不少,自动或半自动化操作确实很方便。然而,随着百度算法的更新,这些博客群发软件产出的外链变得毫无价值,被称为了垃圾外链,不仅对网站...

日期:2018-03-19 浏览次数:2084

商丘SEO指南:如何快速制定一份...

如果你是一家初创公司,这意味着你的资源有限,当然你迫切需要客户,又想低成本的获取潜在的用户,那么最好的选择就是搜索引擎优化,其实它并不复杂,自然搜索流量往往会带来...

日期:2018-07-25 浏览次数:1528

SEO外链优化策略:你还只看重收...

经常听到有人说SEO外链操作没用了,反正不管有没有用,岑辉宇依然每天坚持给自己的博客发布外链,效果的话仁者见仁智者见智了。很多人觉得发布外链没有用的原因,可能是因为搜...

日期:2018-03-12 浏览次数:1446

关于如何做好企业站SEO的日常工...

所谓知己知彼百战不殆,首先一定要知道自家站点的SEO综合信息,知道目前站点收录怎么样,当前的主词百度排名,友链状态,外链情况,另外可以用第三方的统计代码来查看自家站点...

日期:2018-09-19 浏览次数:1396

相关文章

如何理解“跳出率”,它对SEO有...

抢!抢!抢! 双12大促项目招商整年只需4999 跳出率是搜刮引擎优化专家,多年以来热衷讨论的话题,特殊是在权衡企业网站相干产物转化率的时间,有偏重要的参考代价,但在以往的...

日期:2018-12-22 浏览次数:70

SEO现状分析:客观认识SEO的趋势...

兴化 抢!抢!抢! 双12大促项目招商整年只需4999 近来看到网上有些文章唱衰SEO,笔者也算是SEO老鸟一枚了,看到这些文章,好像略有同感,又好像说得太浮夸。任何事变,没有绝对,...

日期:2018-12-15 浏览次数:101

趋势分析法竞价优化分析基本方...

抢!抢!抢! 双12大促项目招商整年只需4999 这是关于趋势阐发法的界说简朴明白就是,通过趋势阐发可以知道变革环境,为猜测将来生长偏向提供资助。这个数据阐发要领比力简朴,...

日期:2018-12-13 浏览次数:77

如何做谷歌排名?提升关键词排...

进步谷歌排名必要多长时间?谁也不能给一个正确的回复,固然哪些使用特别本领上去的除外,但这些特别要领保持的时间调停好久。SEO不是在真空中产生的。每一种环境都提供了一组奇...

日期:2018-12-04 浏览次数:76

英文网站优化方法-容易被忽略的...

提到网站优化各人大概想到的就是站内优化和站外优化,许多文章也会提到这些,但很少有文章详细先容某一方面怎么操纵. 一、站内优化 站内优化包罗许多方面,我们逐一具体阐明...

日期:2018-12-04 浏览次数:73

随机推荐

seo的文章你真的会写吗?...

隐藏在自然排名中的百度推广...

冰桶算法再更新,百度搜索全力...

民权新媒体:百度熊掌号内容源同...

一个知名问答社区的简单SEO方案...

第一次做Google SEO,如何才能做好...