文章の類似度

Last updated Unknown Edit Source

• 自然言語処理

  自然言語処理

  Encodingの歴史 LV1 vector = (only one 1 (hot)) LV2 Tf-idf = appear...

  1/3/2023

  を使って、文章間の類似度を分析する方法 https://medium.com/@adriensieg/text-similarities-da019229c894

• 使い道

  • 検索エンジン
  • 弁護士が関連判例を探すときとか
  • 関連動画提案とか

• 言葉の類似度だけではなく、意味的な類似度をみる必要がある

• 文中の各単語ベクトルの平均をとるだけだと、対して意味のない単語に重みがつきすぎる

• 取捨選択が必要