Token
T
Token
Definition
หน่วยข้อความขนาดเล็ก ราวหนึ่งคำหรือส่วนหนึ่งของคำ ที่โมเดลภาษาอ่านและสร้าง อินพุตและเอาต์พุตที่ยาวกว่าจะใช้ token มากกว่า