TF-IDF中的TF和IDF分别是什么?如何计算?

TF-IDF是向量空间模型中特征权重计算的一个重要环节,通俗的来讲就是搜索引擎需要对每一个收录索引的网页进行特征分析和对应的特征权重计算,具体体现为文档向量词和其对应的TF(词频)和IDF(逆文档频率)。

TF-IDF计算公式

1、TF词频因子计算的两种方式

① wordTF=1+log(TF)

② WordTF=a+(1-a)x[TF/Max(TF)]

TF-IDF中的TF和IDF分别是什么?如何计算?

搜索引擎认为,在一个文档中某一词的TF值越高,则越能代表文档反应的主题内容,也就越应该给该词较大的权值。公式①假设某单词在文档中出现4次,那么其词频因子权值就是3(公式中的1是为了避免如果出现某词在文档中仅出现一次计算返回权值为0的情况,同时也抑制词频超过10次与1次的倍数差距过大问题);公式②公式①相比公式②可以算作为增强型规范化TF,其中的a是为了调节因子,过去经验取值为0.5,最新的研究表明取值为0.4效果更好,公式中的TF代表被计算词的实际词频数量,而Max(TF)则代表当前文档内词频最高的词所对应的实际词频数量,之所以如此计算是为了平衡短文档与长文档之前因文档长度所导致的计算差距,通俗来讲长文档不代表就是最符合用户需求的那个,当然短文档不能因为其短就不能解决用户需求;
总结:
对SEO而言,我们现在得知了以下两个结果:

  • 大量刻意增加词频是无效的;
  • 文章的篇幅长短并不能强化你的最终词频权值;

2、IDF逆文档频率因子计算公式

IDFk=log(N/nk)文档中的的N代表文档合集中总共有多少个文档,nk则代表特征单词K在其中多少篇文档出现过,也就是我们通常说的文档频率。从公式中我们能看出nk值越大,IDF值就越小,IDF值代表了单词带有的信息量有多少,IDF值得高低代表信息越有价值,可以把他通俗的理解成:物以稀为贵。
总结:
对SEO而言,我们可以思考一个问题,文档集(不清楚文档集概念的可以查看下:什么是倒排索引,正向索引和倒排索引的区别是什么?)我们不可控制,那我们能否从拓词的时候选好要做的核心词,从而达成控制IDF所得的权值?

3、TF*IDF框架计算公式

weightword1=TF*IDF

TF-IDF中的TF和IDF分别是什么?如何计算?

从以上公式我们可以看出最终我们要计算word1中某词的特征权重就是要将该词的TF权值与IDF值相乘计算,对于word1来说:

  • 计算词的词频很低,其在文档集中出现的次数较多,那他的特征权重就很低。
  • 计算词的词频很高,其在文档集中出现的次数较少,那他的特征权重就很高。
  • 计算词的词频很高,其在文档集中出现的次数较多;或者词频很低,文档集中出现的次数也较少,那这个词的特征权重值就一般。

结合上面的所有公式和分析可以肯定在选词上我们选择合理的潜力词可以提升我们优化词的特征权重值,词频可以布局过多其实意义并不大,正常来说我们在讲述一个主题时对主题的描述肯定是大于拓展的,所以其核心词频也就相对较高,也较为合理;反之如果为增强关键词词频增加大量词频不仅费脑耗时还有可能影响到主题集中,拓展内容喧宾夺主,这也就是为什么很多文章内容页会出现seo预料之外的其他索引词效果比优化词好的情况。

TF-IDF中的TF和IDF分别是什么?如何计算?

发布者:超威蓝猫,转转请注明出处:https://seowki.com/seo/baiduseo/4152.html

(0)
上一篇 2022-04-12 13:17
下一篇 2022-04-12 13:27

相关推荐

  • 怎么处罚淘宝店违规?

    对于存在违规行为的店铺,淘宝将根据违规程度和类型给予不同的处罚。 那就去看看淘宝店是如何违规的。 怎么处罚淘宝店违规? 根据淘宝网公布的《淘宝网会员违规处理规定》,对淘宝店铺的处罚规则主要分为一般违规、严重违规和假冒销售违规三种。 这三类违规行为的扣分是分别累加的,即一般违规行为的扣分不会影响严重违规行为或假冒违规行为的扣分,反之亦然。 每种违规记分都有一个…

    百度SEO 2023-06-25
    00
  • 网站优化包括哪些?这6大体系你都清楚吗?

    在当今的互联网时代,网站优化已经成为了企业展示自己、扩大影响力的重要手段。但是,很多人并不知道网站优化具体包括哪些内容。本文将为您介绍网站优化的内容,并给出一份网站优化的内容表格,供您参考。 首先,我们来看看网站优化的基本内容。 网站结构优化:网站结构优化是指对网站的目录结构、链接结构进行优化,使网站更加清晰、易于导航。网站结构优化的目的是让搜索引擎更好地理…

    百度SEO 2022-12-30
    00
  • 怎么查看淘宝客服服务诊断?

    服务诊断是淘宝客服平台与商家顾问推出的官方【咨询服务体验】数据诊断工具。 提供门店咨询体验监控、售前/售后服务、机器人/人工服务、同行数据表现、咨询评价标签、服务质量指标体系、新灯塔评价指标等数据分析诊断,提供优秀的咨询服务 改善策略,帮助淘宝商家提升店铺服务能力,全面优化服务体验。 怎么查看淘宝客服服务诊断? 【第一期已上线】服务体验监控——满意度数据、售…

    2023-06-23
    00
  • 怎样运营开网店大促前的预热

    大促销前期,预热活动正如火如荼地进行。 店主们似乎已经把大促前后的转化率低视为常事,降低了一定的促销成本。 他们只是在大促销开始时才增加成本。 不得不说,这样做的效果一定不好。 因为我们在预热之前没有做好准备,导致大促期间进来的流量消化不了,那么问题来了,大促之前的热身怎么玩呢? 怎样运营开网店大促前的预热 1.明确热身期目标 1、唤醒店铺老顾客:这个需要分…

    百度SEO 2023-08-01
    00
  • 最新消息称佳能年底推出 PowerShot V100 紧凑型 APS-C 相机

    佳能即将在年底推出全新的 PowerShot V100 紧凑型 APS-C 相机,为摄影爱好者带来了令人兴奋的消息。这款相机将结合佳能的先进技术和紧凑设计,为用户提供卓越的图像质量和便携性。 最新消息称佳能年底推出 PowerShot V100 紧凑型 APS-C 相机 PowerShot V100 将采用 APS-C 大尺寸传感器,这是一项令人期待的功能。…

    百度SEO 2023-06-24
    00

发表回复

登录后才能评论