第153章 大洋彼岸的邀约 (第7/10页)

通过搜索相关信息，发现这个时空虽然慢了一点，但VSM向量空间模型这个方法在1977年也被提出来了。

    所谓的VSM模型听起来或许挺高大上的。

    其实没那么复杂。

    其主要思想就是假设一个文本的语义只与该文本中的单词有关，而忽略其语序和单词之间的相互关系，然后通过基于词频统计的方法，将文本映射成向量，最后通过向量间的距离计算以表征文本间的相似度。

    计算两个向量之间的距离？

    这玩意是高中课本上的内容。

    估计高考后脑子里知识还没忘记的一般考生都能拿过来利用这个模型算算文本相似度。

    不过很多高中生学的时候可能根本不知道他们学的这玩意能做这个。

    （ps：……高中学的东西很有用，不要觉得暂时看不到用途就放弃）

    当然，也正是由于该模型简单高效。

    在该模型提出来之后很长的一段时间里，它都是文本相似度计算领域的主流方法。

    但该模型并不是没有缺点。

    基于VSM的方法仍然有两点缺陷:

    一方面当文本量很大时，生成的文本向量是非常稀疏的，这就导致了空间和计算资源的浪费;

    另一方面VSM为达到简化模型的效果忽略了词语间的关系，但在很多情况下词语之间是存在联系的，因此简单地认为词语间相互独立是不合理的。

    这两条缺陷尤其致命。

    第一条直接影响处理相似度的效率，第二条直接影响词义相似度判别的准确度。

    在这种情况下，VSM模型在使用了一段时间之后，研究人员就将这个模型抛弃了。

    现在的人们具体应用什么计算文本相似度林灰也不