您的当前位置:首页 > SEO优化 > SEO教程:实操演示教你如何写好网站robots 正文
时间:2024-05-12 21:23:48 来源:网络整理 编辑:SEO优化
前言写好网站robots,有助于网页的的快速收录,其次能节省网站的资源。在网站上线之前,就规划好我们要重点收录的页面,对应写好robots。目录01.前提:规划栏目02.robots的针对性03.实操
写好网站robots,有助于网页的示教的快速收录,其次能节省网站的何写好网资源。在网站上线之前,程实操演就规划好我们要重点收录的示教页面,对应写好robots。何写好网
目录01.前提:规划栏目
02.robots的针对性
03.实操演示
最后的话
01 前提:规划栏目在网站上线之前,我们要进行关键词分析,示教确定我们的何写好网主词,短语词,程实操演长尾词。示教
然后建立词库规划栏目开始布局这些词。布局好以后,程实操演下一步就是示教撰写网站抓爬协议robots。
但在书写robots之前,必须有明确的目标。这个目标就是栏目规划。当我们规划好栏目以后,自然就明白,哪些栏目是要蜘蛛抓取的,哪些是不要蜘蛛抓取的。
02 robots的针对性写robots必须针对性书写,不能乱写。乱写会给站内SEO优化带来一些小麻烦,得不偿失。
那么如何针对性的书写robots呢?我们以一个传统企业的官网:【鹰吉派】举例。
鹰吉派官网这个网站首页中布局了9个关键词,前6个都与业务相关没有任何问题。后面3个就有问题了,问题出在哪里呢?我们看它的网站地图。这样写在一定程度上影响了排名。并且存在2个问题
鹰吉派官网robots.txt抓取对象多会非常耗费蜘蛛与服务器资源1.抓取对象太多,且权重易分散
2.没有明确抓取的重心
那么如何书写呢?我们第03节细讲。
要明确抓取重心03 实操演示1、减少抓取对象前面讲到栏目规划,这里我们看到了9个栏目,最后的三个栏目是废物,必须要屏蔽掉。让蜘蛛明确抓取前6个栏目即可,正确书写如下。
屏蔽后面三个栏目2、没有明确收录的重心蜘蛛抓取网站数据有一个特殊爱好。它的抓取方式是:从左往右,从上到下。
因此把你最想收录的页面给它做一个抓取提示,它看到你的提示,它就有了大致的抓取方向,抓起来就更高效,更快捷。
提示让它抓这6个页面最后修改robots如下,检查完毕上传网站根目录即可。
修改后的官网robots.txt上图中,我明确写出了6个页面是给蜘蛛6个建议。但在这里我建议你根据自己业务的实际情况只写一个。
这个页面可以是网站中最核心的那个页面,它可以是单页面,也可以是栏目页,也可以是聚合页。具体请以实际情况为主,不要生搬硬套。
最后的话网站robots与站内SEO优化的关系比较特别。它并不直接影响SEO优化,但会间接产生副作用。
在网站上线以前,就要处理好它与站内SEO之间的关系。书写规范是必须的,一定要写好。
由于互联网数据的缓存关系,robots上传以后的生效期是1-3天左右。并不是立刻生效。
在1-3天内,蜘蛛不会按照robots协议进行抓取。当1-3天缓存更新以后,蜘蛛才会按照协议去抓取。
其次每个搜索引擎的生效时间各有不同,存在差异。这点请在实战中仔细观测。
做一个有趣的人,再见巴郎!
-END-
灰色行业应该如何做网站优化排名2024-05-12 21:11
广东网络SEO标题优化有哪些技巧?2024-05-12 21:00
为什么佛山SEO优化排名新站这么难做?2024-05-12 20:48
网站建设公司告诉你:网站日常维护有哪些内容2024-05-12 20:16
如何做好一个高端网站的设计2024-05-12 20:09
一个长沙SEO站长可不只要掌握优化推广哟!2024-05-12 19:44
上海网站SEO中企业网站优化怎么写文章2024-05-12 19:31
广东地区网站seo推广排名如何获得?2024-05-12 19:10
么2024-05-12 18:47
你遇到了以下3方面的seo优化问题了吗2024-05-12 18:40
访量2024-05-12 20:50
为什么佛山SEO优化排名新站这么难做?2024-05-12 20:42
SEO优化有没有对网站排名快速有效的方法?2024-05-12 20:38
网站优化选择关键词很重要吗?体现在哪些方面?2024-05-12 20:18
谷歌SEO工具推荐:让你轻松了解网站表现及改进空间2024-05-12 20:06
长沙企业网站做seo优化好做吗?新手应该怎么做?2024-05-12 19:44
SEO优化报价是怎么评估的?2024-05-12 19:36
网站优化选择关键词很重要吗?体现在哪些方面?2024-05-12 19:35
如何使用PageAdmin网站管理系统制作网站?2024-05-12 19:29
东莞SEO中常用的关键词分析方法有哪些?2024-05-12 19:06