您现在的位置是:首页 > 巴郎SEO > SEO教程SEO教程
SEO教程:巴郎手把手教你如何写好网站robots
巴郎2021-01-15【SEO教程】人已围观
简介写好网站robots,有助于网页的的快速收录,其次能节省网站的资源。在网站上线之前,就规划好我们要重点收录的页面,对应写好robots。
前言
01
前提:规划栏目
前提:规划栏目
在网站上线之前,我们要进行关键词分析,确定我们的主词,短语词,长尾词。然后建立词库。开始布局这些词。布局好以后,下一步就是撰写网站抓爬协议robots。在《SEO教程:我叫若波茨(robots),初次见面请多多关照》一文中,巴郎重点说明了robots的重要性与意义。没读过的朋友,一定先读一下。
但在书写robots之前,必须有明确的目标。这个目标就是栏目规划。当我们规划好栏目以后,自然就明白,哪些栏目是要蜘蛛抓取的,哪些是不要蜘蛛抓取的。
02
robots的针对性
robots的针对性
写robots必须针对性书写,不能乱写。乱写会给站内SEO优化带来一些小麻烦,得不偿失。那么如何针对性的书写robots呢?我们以一个传统企业的官网:鹰吉派举例。
鹰吉派官网


这个网站首页中布局了9个关键词,前6个都与业余相关没有任何问题。后面3个就有问题了,问题出在哪里呢?我们看它的网站地图,这样写在一定程度上影响了排名。
官网地图


并且存在2个问题
1.抓取对象太多
2.没有明确收录的重心
那么如何书写呢?我们第03节细讲。
抓取对象太多会特别耗费服务器与蜘蛛资源

明确抓取的重心


明确抓取的重心

03
实操演示
实操演示
—01—
抓取对象太多
前面讲到栏目规划。这里我们看到了9个栏目,最后的三个栏目是废物,必须要屏蔽掉。让蜘蛛明确抓取前6个栏目即可。正确书写如下。
屏蔽后面3个栏目


—02—
没有明确收录的重心
蜘蛛抓取网站数据有一个特殊爱好。它的抓取方式是:从左往右,从上到下。因此把你最收录的页面给它做一个抓取提示,它看到你的提示,它就有了大致的抓取方向,抓起来就更高效,更快捷。
提示让它抓这6个页面


最后修改robots如下。检查完毕上传网站根目录即可。
修改后上传


上图中,我明确写出了这6个页面。是给蜘蛛6个建议。但在这里我建议你根据自己业务的实际情况只写一个。这个页面可以是网站中最核心的那个页面,它可以是单页面,也可以是栏目页,也可以是聚合页。具体请以实际情况为主,不要生搬硬套。
最后的话
网站robots与站内SEO优化的关系比较特别。它并不直接影响SEO优化,但会间接产生副作用。在网站上线以前,就要处理好它与站内SEO之间的关系。书写规范适必须的,一定要写好。
由于互联网数据的缓存关系,robots上传以后的生效期是1-3天左右。并不是立刻生效。在1-3天内,蜘蛛不会按照robots协议进行抓取。当1-3天缓存更新以后,蜘蛛才会按照协议去抓取。
其次每个搜索引擎的生效时间各有不同,存在差异。这点请在实战中仔细观测。这期的《SEO教程:巴郎手把手教你如何写好网站robots》就给大家讲解完了,我们下期再见。
做一个有趣的人,再见巴郎!
作者:巴郎
公众号:巴郎刊
很赞哦! ()
相关文章
随机图文
巴郎SEO:《大头娃父子的故事》告诉你搜索引擎的工作原理
正式入门SEO的第一堂课,便是详细地了解搜索引擎的工作原理。搜索引擎的工作原理是绿帽SEO与白帽SEO和搜索引擎相处的基石。优化我们的网站之前,必然要先了解搜索引擎的工作原理。SEO教程:巴郎详解HTML与SEO交集之title标签的秘密
HTML与SEO在基础标签中是有多交集的,这些交集标签都是SEO的重中之中,今天巴郎带大家一篇SEO教程,来认彻底识一下HTML与SEO交集之title标签的秘密-SEO教程巴郎SEO教程:影响网站打开速度的4个因素
网站的打开速度关乎2个非常重要的点。蜘蛛抓爬的体验与用户体验。如果这两个点没做好,SEO做再好都是徒劳,今天巴郎SEO给大家介绍一下影响网站打开速度的4个因素,以及解决方案-SEO教程SEO教程:巴郎带你认真学一下网站空间
网站空间就是网站的粮草大营,也是SEO优化工作的第二步,网站空间性能必须稳定,要坚不可破,没有最好的空间,适合的空间就是好空间—SEO教程
文章评论
点击排行

标签云
-
DedeCMS创始人(1) SEO双标题(1) SEO16条黑话(1) 网站SEO优化(1) SEO老域名(1) SEO网站建设(1) 个人IP(1) 百度指数(1) 墨茶Official(1) 公众号(1) 网站robots(1) robots(1) SEO基础(1) SEO关键词难易度(1) 30岁(1) SEO关键词(3) 冰桶算法(1) stong标签(1) 百度纪录片(1) 百度(1) description标签(2) 长尾词优化(1) 长尾关键词(1) 企业SEO营销(1) SEO书籍(1) 网站程序(1) SEO网站搭建(1) 视频号(1) 巴郎刊(6) 新人入门(19) 巴郎SEO(11) 巴郎(6) 巴郎故事(3) 孙子兵法(1) 随笔(13) 见闻(1) 商学(0) SEO百科(7) SEO算法(3) SEO工具(2) SEO教程(16) SEO学习(12)
猜你喜欢
- SEO教程:巴郎SEO带你入门初级HTML
- SEO教程:详解description标签的书写规范
- SEO教程:巴郎手把手教你如何写好网站robots
- SEO教程:做网站SEO选购老域名的8个坑你跳了几个?巴郎带你挨各儿跳!
- SEO教程:巴郎详解HTML与SEO交集之keywords标签的妙用
- SEO教程:巴郎详解HTML与SEO交集之title标签的秘密
- SEO教程:网站SEO优化中,从4个方面详解域名与SEO优化之间的关系?(谷歌百度皆适用)
- SEO教程:我叫若波茨(robots),初次见面请多多关照
- SEO教程:巴郎带你认真学一下网站空间
- SEO教程:5个维度解密通吃90%行业的SEO关键词分析方法