词向量

词向量,就是用一串数字表示一个词,让计算机能计算和比较词之间的关系。 你可以先把它想成:给词一个在“关系地图”上的位置。

点击 “播放动画”,按三步看,也可以用“下一步”慢慢看:

  1. 词 → 数字:“猫”对应一串数字,这串数字就是它的向量。
  2. 数字 → 位置:这里用两个数字,分别表示横、纵坐标;从原点指向这个位置的箭头,也能表示这个向量。
  3. 比较位置:用法或语境相近的词,学到的向量往往比较接近,因此计算机可以据此寻找相关词。

图里的坐标是手工设计的教学示例。真实词向量的数字来自模型对文本的学习,通常有很多维;每一维一般没有可以单独命名的明确含义。 Google 入门说明

滚动至顶部