สรุปบทที่ 2 + แบบทดสอบ
AI อ่านเป็นชิ้นเล็กๆ ที่เรียกว่าโทเคน ภาษาไทยถูกหั่นละเอียดกว่า เลยกินที่และค่าใช้จ่ายมากกว่า
สิ่งที่คุณได้เห็นในบทนี้
- AI หั่นข้อความเป็น โทเคน (token)ชิ้นข้อความเล็กๆ ที่ AI อ่านและเขียนทีละชิ้น อาจเป็นทั้งคำ ครึ่งคำ หรือตัวอักษรเดียวดูคำศัพท์ทั้งหมด ก่อนอ่านเสมอ
- ข้อความไทยยาวๆ มักได้จำนวนชิ้นมากกว่าภาษาอังกฤษที่ความหมายเท่ากัน
- ความจำระยะสั้น (context window)จำนวนโทเคนที่ AI อ่านได้ในการคุยหนึ่งครั้ง ถ้าเกิน ข้อความเก่าจะถูกตัดหรือลืมดูคำศัพท์ทั้งหมด ของ AI รับได้จำกัด ไทยจึงเต็มเร็วกว่า
- เขียนสั้น ชัด และแปะเฉพาะส่วนที่เกี่ยว ช่วยได้ทั้งเรื่องที่และเรื่องเงิน
ตอบถูก 2 ใน 3 ข้อก็ผ่าน

มังคุด
แล้วถ้าอยากรู้ว่าตัวหั่นทำงานละเอียดกว่านี้ ไปดูต่อที่ไหนได้ครับ?
จบบทแล้ว
ZENITH Lite · บทที่ 2
ทำไมภาษาไทยกินโทเคน
AI อ่านเป็นชิ้นเล็กๆ ที่เรียกว่าโทเคน ภาษาไทยถูกหั่นละเอียดกว่า เลยกินที่และค่าใช้จ่ายมากกว่า