深度了解搜索引擎抓取及更新策略后,我们能做的还有很多!

seo经常会遇到收录、页面更新频率的一些问题,但是往往我们对这些问题解决的方式大多数都停留在:提交url、固有页面内调整抓取入口、发布外链以及投诉快照等操作上,这些操作与搜索引擎的抓取策略和更新策略都是息息相关的,我们对这些操作的本质了解多少?如果以上这些操作我们做完之后还是不收录还能做什么?

一、搜索引擎的抓取策略

深度了解搜索引擎抓取及更新策略后,我们能做的还有很多!

搜索引擎抓取策略大致分为以下四种:

宽度优先遍历策略

这种策略出现在搜索引擎搜索引擎二代初期,通过蜘蛛抓取到的页面进行URL提取直接追加到待抓取URL的队列末端等待抓取,该项策略的最大问题在于无法对重要网页进行及时抓取,但我们可以反过来思考下这个问题,如果我们该项页面在互联网上拥有大量推荐,那么该URL被发现的几率会大大提升,便可以提前进入待抓取URL队列,但这种操作基本上不常见,投入巨大但效果在当下来看并不是特别理想。

非完全PageRank策略这种策略

基于PageRank算法对页面抓取优先级进行排序,但由于搜索引擎抓取覆盖局限问题(大量未抓取页面和暗网页面)导致该项策略无法全局性计算,所以命名为“非完全PageRank策略”。

OCIP策略

OCIP策略也成为“在线页面重要性计算”,当搜索引擎抓取到一个网页时会将当前网页所拥有的权重值平均分给其页面上提取出的其余链接,并将当前页面权重值清空,以此达到待抓取网页权重值累加排序优先级的目的,此项策略与PageRank算法相似,但区别在于该项策略为即时计算无需迭代,但非完全PageRank策略需要将页面累积到一定量后重新计算各待抓取页面的权重值,需要迭代。


大站优先策略

顾名思义拥有大量数据并且页面质量达标的站点就是所谓的“大站”,达到大站以后搜索引擎便会以网站为单位进行抓取策略制定,我们结合上面的三种策略可以得出:如果想拥有大量的权重值就需要大量的链接指向,但当下搜索引擎降低外链质量分,我们只能通过制造大量符合标准的站内页面加上质量较好的友情链接才能将以上策略充分在自身站点发挥。

二、搜索引擎的更新策略

深度了解搜索引擎抓取及更新策略后,我们能做的还有很多!

搜索引擎抓取更新大致分为以下三种:
历史参考策略该项策略就是通过对以往站的更新频率以及更新量综合参考得出符合该站点的最佳更新频率,属于比较可控的操作方式,我们可以通过抓取策略中的大战优先策略将我们自身站点提升至大站水平,从而使历史参考策略发挥价值。用户体验策略用户体验策略主要是建立在用户搜索行为之上的更新策略,假设用户在搜索一个词时看完前3页的搜索结果还没有找到自己想要的内容依旧翻页,那就说明该搜索关键词所涉及到的索引库需要更新,搜索引擎便是由此利用该项策略对更新频率做了触发设置,翻页行为越强对更新影响越大。


聚类抽样策略对于互联网上所有站点搜索引擎都会将其做一个分类属性归属,以确保新站无法参与历史参考策略和用户体验策略,再通过对聚类中的站点抽样分析得出该分类属性站点的更新值,所以我们要注重新站上线后的站点属性设置问题,也是促进页面更新一种手段。

深度了解搜索引擎抓取及更新策略后,我们能做的还有很多!

通过以上的了解详细大家对抓取及更新都有了较为全面的认知,针对网页收录和更新操作也有了深入理解。

发布者:超威蓝猫,转转请注明出处:http://seowki.com/seo/baiduseo/4109.html

(0)
上一篇 2022-04-11 18:02
下一篇 2022-04-11 21:58

相关推荐

  • 在闲鱼永久封禁的情况下怎么解绑支付宝账号

    如果你的闲鱼账号被永久封禁,支付宝解绑就比较困难。 一般情况下,账号被封禁后,闲鱼平台会冻结与该账号相关的支付宝账号,以保证账号安全,防止非法操作。 因此,一旦账户被封禁,支付宝解绑可能会要求您联系闲鱼客服并提供详细的身份验证及相关证明材料后才能解绑。 在闲鱼永久封禁的情况下怎么解绑支付宝账号 对于被扣100分的情况,一般来说,闲鱼会根据违规的严重程度对账户…

    百度SEO 2023-06-25
    00
  • 最新消息称用户提前 4 天收到谷歌 Pixel Fold 手机:可 180 度展开、分屏多任务无卡顿

    最近有消息称,一些用户提前4天收到了谷歌Pixel Fold手机。这款手机据说可以180度展开,并且在分屏多任务时没有卡顿的问题。 最新消息称用户提前 4 天收到谷歌 Pixel Fold 手机:可 180 度展开、分屏多任务无卡顿 如果这一消息属实,那么这将是一个令人兴奋的进展。可折叠手机是近年来技术发展的一个重要方向,它们能够提供更大的屏幕空间和更多的多…

    百度SEO 2023-06-24
    00
  • 10分钟了解搜索引擎工作原理

    关于搜索引擎的工作原理在seo来说应该是最先需要了解的基础,只有充分了解搜索引擎的工作原理才能更好的迎合搜索引擎做好自身站点的优化工作,话不多说我们从以下三方面对搜索引擎进行一个简单的介绍: 一、搜索引擎的发展史 提到工作原理我们首先需要了解一下搜索引擎的发展史: 1 、 分类目录检索:搜索引擎始于1994年也就是第一代真正基于互联网的搜…

    2022-04-11
    20
  • 搜索引擎的HITS算法原理是什么?我们应该如何优化?

    HITS是一个网页重要性的分析的算法,其目的是为了让用户能快速找到与查询主题相关的高质量页面,那他的算法原理和工作原理是什么? HITS算法工作原理 如图所示,我们在实践中不难发现,单纯依靠PageRank算法返回排序的网页其相关性无法保证,这样便会导致搜索环境差的结果,HITS算法其本质就是兼顾领域高质量入链(Hub)的同时兼顾入链页面的相关性(Autbo…

    2022-04-12
    00
  • 网店运营的推广有哪些特点?

    网店运营推广其实有他的独特之处,如果是做网店运营的推广它具体的特点有哪些?接下来,我们就来说下网店运营推广特点的部分,想了解的朋友们,不妨跟着我们来看下,相信大家看完就清楚了。 网店运营的推广有哪些特点? 一、网店运营的推广特点有哪些? 1、节省时间:店铺经营、管理、营销及推广需要很多时间,但是网上操作会轻松不少。 2、节省成本:即可以节约人工成本,还能有更…

    2023-06-24
    00

发表回复

登录后才能评论

评论列表(1条)