T

言語モデルが読み書きする最小テキスト単位で、おおよそ1単語または単語の一部です。入力と出力が長いほど、より多くのトークンを使用します。

Definition