欢迎访问阿凡达网络官方网站
400-189-1319
实效网络营销践行者专注于企业网络营销策划、营销型网站建设、实操培训、网络运营推广外包。
联系我们

联系方式

阿凡达网络(单仁学员)9年专注营销型网站建设,外贸、小语种网站设计制作,手机网站建设,网站运营托管,网络营销外包,软件开发,阿里巴巴托管代运营,阿里旺铺装修

当前位置: 首页 > 建站知识 > 无锡网站建设聊搜索引擎蜘蛛抓取配额的相关问答

无锡网站建设聊搜索引擎蜘蛛抓取配额的相关问答

资讯来源:阿凡达网络 所属分类:建站知识 发布时间:2019/8/17 10:48:40 点击次数:
摘要:抓取份额是搜索引擎蜘蛛花在一个网站上的抓取页面的总的时间上限。
  抓取份额是搜索引擎蜘蛛花在一个网站上的抓取页面的总的时间上限。
  一、什么是搜索引擎蜘蛛抓取份额?
  顾名思义,抓取份额是搜索引擎蜘蛛花在一个网站上的抓取页面的总的时间上限。对于特定网站,搜索引擎蜘蛛花在这个网站上的总时间是相对固定的,不会无限制地抓取网站所有页面。
  抓取份额的英文Google用的是crawl budget,直译是爬行预算,我觉得不太能说明是什么意思,所以用抓取份额表达这个概念。
  抓取份额是由什么决定的呢?这牵扯到抓取需求和抓取速度限制。
  二、抓取需求
  抓取需求,crawl demand,指的是搜索引擎“想”抓取特定网站多少页面。
  决定抓取需求的主要有两个因素。一是页面权重,网站上有多少页面达到了基本页面权重,搜索引擎就想抓取多少页面。二是索引库里页面是否太久没更新了。说到底还是页面权重,权重高的页面就不会太久不更新。
  页面权重和网站权重又是息息相关的,提高网站权重,就能使搜索引擎愿意多抓取页面。
  三、抓取速度限制
  搜索引擎蜘蛛不会为了抓取更多页面,把人家网站服务器拖垮,所以对某个网站都会设定一个抓取速度的上限,crawl rate limit,也就是服务器能承受的上限,在这个速度限制内,蜘蛛抓取不会拖慢服务器、影响用户访问。
  服务器反应速度够快,这个速度限制就上调一点,抓取加快,服务器反应速度下降,速度限制跟着下降,抓取减慢,甚至停止抓取。
  所以,抓取速度限制是搜索引擎“能”抓取的页面数。
 
立即咨询项目总监服务热线:13665141391
低成本、高回报、无风险、零人工、一次投资,终身受益 咨询热线400-189-1319
无锡阿凡达网络科技有限公司
地址:无锡恒隆广场办公楼1座11层1105单元 Copyright @ 2015 阿凡达网络 版权所有 苏ICP备13021672号-1
联系我们
官方微博官方微博:http://weibo.com/wxafd
咨询邮箱咨询邮箱:2242241319@qq.com
咨询热线咨询热线:400-189-1413
微信微信:13665141391
阿凡达QQ2242241319阿凡达微博wxafd
阿凡达联动官方微信
关注官方微信
关注官方微信