第153章 大洋彼岸的邀约 (第6/10页)


    在人工智能领域，也需要语义文本相似性算法来支持问答系统和智能检索等任务。

    此外，语义文本相似性计算也被广泛用于自然语言处理任务中，如抄袭检测、文本总结和机器翻译。

    总之，对语义文本相似性算法为代表的相似度模型研究具有重要的应用价值。

    如果不解决计算文本语义相似度这个问题的话，跟别提如何更进一步的文本处理了。

    抛开让机器区分相似文本这个问题不谈。

    仅仅是想要机器识别文本这件事情就极其困难了。

    自然语言一般就是说人类能理解的语言，比如看到的文字就是自然语言。

    但当我们需要机器或者说计算机处理自然语言时。

    机器/计算机却没办法直接理解这些符号（汉字、字母、标点符号等）。

    这些符号必须先被数值化，然后才能输入计算机进行后续处理。

    仅仅只是数值化之后也用途不大。

    必须引入其他的一些内容来反应出词的属性。

    就像我们不能从一个普普通通的代号知道这串数字究竟表示的是订阅、收藏还是打赏。

    总之，仅仅是一个代号是看不出来每串数字对应的属性的。

    这个问题也是计算文本语义相似度的一个研究热门之一。

    如何表示数值化的自然语言相对应的属性呢？

    研究人员一般做法是将数值化的语言矢量化或者说向量化。

    向量相比于标量的话就是带方向的量。

    事实上这种研究方向并不算新潮。

    林灰记得前世早在1975年，就有研究人员首次提出向量空间模型(VSM)，试图利用该模型来处理数值化的自然语言。

    林灰