GLOSSARY

sentence

文。まとまった一続きの言葉

1本の論文題名に登場

定義

処理の単位としての文を指し、単語単位でも文書単位でもない中間の粒度であることを示す。文単位の埋め込みは検索・類似度判定・クラスタリングの基本単位で、単語埋め込みでは扱えない語順や構文の効果を含められる。近年は段落やチャンクにも同じ枠組みが適用され、名前より長い単位を指すこともある。

単語でなく文が単位