SEO知识

为你提供网站建设制作资讯、网站seo优化知识、网站设计开发常见问题等。

SEO优化中robots协议你真的了解吗

日期:2020-07-14 09:07:33作者:博雅立方浏览:

初学者在一开始触碰seo的情况下,对seo中许多文档将会不太掌握,例如常见的好多个文档,robots.txt(robots协议文档)、.htacces(设定301/伪静态等文档)、sitemap.xml/txt/html(sitmap文档)等,今日深圳网络公司-博雅立方就来详细介绍第一个文档robots协议,希望对有需要的网站运营人员有所帮助。

什么叫robots协议呢?robots是网站和网络爬虫间的协议书,用简易立即的txt格式文字方法告知相匹配的网络爬虫被容许的管理权限,换句话说robots.txt是百度搜索引擎中浏览网址的情况下要查询的第一个文档。当一个检索搜索引擎蜘蛛浏览一个网站时,它会先查验该网站根目录下是不是存有robots.txt,假如存有,检索智能机器人便会依照该文件中的內容来明确浏览的范畴。

假如该文件不会有,全部的检索搜索引擎蜘蛛将可以浏览网站上全部沒有被动态口令维护的网页页面。简易的而言便是让你的网站做一个管理权限明细,告知百度搜索引擎这些网页页面能够浏览,这些不可以浏览等。

robots协议一般普遍的robots协议书写以下:

User-agent:*

Disallow:/*?*

robots协议放哪儿呢?robots.txt这一文件名称是固定不动的,务必那样写。无论大家做哪些的网站全是这一名字。robots协议文档放到网站根目录,说白了的网站根目录便是http://网站域名/robots.txt可以立即浏览到的,千万别弄错了哈。

网站建设运营,网站建设策划

robots.txt的书写标准:

User-agent:*这儿的*意味着的全部的百度搜索引擎类型,*是一个使用通配符,容许搜索引擎蜘蛛浏览全部网页页面。

Disallow:/admin/这儿界定是严禁爬寻admin文件目录下边的文件目录。

Disallow:/require/这儿界定是严禁爬寻require文件目录下边的文件目录。

Disallow:/cgi-bin/*.htm禁止访问/cgi-bin/文件目录下的全部以".htm"为后缀名的URL(包括根目录)。

Disallow:/abc/这儿界定是严禁爬寻abc全部文件目录。

Disallow:/*?*禁止访问网址中全部的动态性网页页面。

Disallow:/jpg$严禁爬取网页页面全部的.jpg格式的照片。

Allow:/tmp这儿界定是容许爬寻tmp的全部文件目录。

Allow:.htm$仅容许浏览以".htm"为后缀名的URL。

Allow:.gif$容许爬取网页页面和gif格式照片。

seo优化是一个长期的过程,需要我们花足够的心声去经营维护,从开始的网站建设策划网站主页设计,之后的网站建设运营,都是需要用心才能做好,只有开始的时候注意细节,到了后期运营起来才会便捷很多。



文章关键词: 门户网站建设方案 品牌网站建设网站建设哪家公司好 网站方案设计 网站设计风格 网页颜色搭配 企业网站开发 网站主页设计 网站建设运营 网站建设策划

分享到
  • 微信好友
  • QQ好友
  • QQ空间
  • 新浪微博
  • 人人网

相关推荐新闻

外贸网站设计中需要重点把握哪些点呢

日期:2021-01-21浏览:

专业深圳网站建设和制作需要重视哪几点

日期:2021-01-21浏览:

优秀的网站设计应具备哪些特点呢

日期:2021-01-21浏览:

网页设计过程如何让内容更有吸引力呢

日期:2021-01-21浏览:

中小企业建站的必要性体现在哪些方面呢

日期:2021-01-20浏览:

选择网站建设公司需要综合考虑哪几点呢

日期:2021-01-20浏览:

友情链接在seo优化阶段具有哪些作用呢

日期:2021-01-20浏览:

自己建站需要掌握哪些知识呢

日期:2021-01-20浏览:

深圳网站建设过程如何制作网页呢

日期:2021-01-20浏览:

小程序开发制作后怎么关联微信呢

日期:2021-01-19浏览:

开发一个电子商务平台需要多少钱

日期:2021-01-19浏览:

h5网站制作重点需要明白哪几点

日期:2021-01-19浏览:

新手做网站需要多了解些什么

日期:2021-01-19浏览:

建立网站之前要明确什么

日期:2021-01-19浏览:

如何进行网站导航菜单设计

日期:2021-01-18浏览: