บทที่ 5 · จากเครื่องเดาคำ สู่ผู้ช่วย หน้า 6/12 ~3 นาที

ลองคำนวณ: คนจะชอบคำตอบไหนมากกว่า

ถึงตาคุณคำนวณเองบ้าง ใช้สูตรเดียวกับหน้าก่อน (กดเครื่องคิดเลขในหน้านี้ได้):

ยิ่งคะแนนสองคำตอบห่างกัน reward model ยิ่งมั่นใจว่าคนจะชอบคำตอบที่คะแนนสูงกว่า

ลองคำนวณเอง

ตอบเป็นตัวเลข (หน่วย %) · คลาดเคลื่อนได้ ±0.5% · พิมพ์ 0.25 หรือ 25 ก็ได้

พี่แนนฝ่าย HR ให้ AI ร่างประกาศอีกฉบับ "ชวนพนักงานลงชื่อกิจกรรมปลูกต้นไม้วันเสาร์" มาสองแบบ reward model ให้คะแนนดังนี้

  • แบบ A สั้น เป็นกันเอง มีลิงก์ลงชื่อชัดเจน:
  • แบบ B ภาษาทางการแข็งๆ ศัพท์ยาก อ่านจบแล้วไม่รู้ว่าต้องทำอะไรต่อ:

ตามสูตร Bradley–Terry โอกาสที่คนจะชอบแบบ A มากกว่าแบบ B เท่ากับกี่ %? (ตอบทศนิยม 1 ตำแหน่ง)

คำใบ้ (2)
  1. หาผลต่างก่อน: แล้วใช้
  2. ดังนั้นตัวส่วนคือ
ดูเฉลย

คำตอบ: 81.8%

= 81.8%

คิดแบบ softmax ก็ได้คำตอบเดียวกัน: , แล้ว

สังเกตไหมว่าถ้าบวก 10 ให้ทั้งคู่ (12.0 กับ 10.5) ผลต่างยังเป็น 1.5 คำตอบจึงยังเป็น 81.8% สิ่งที่มีความหมายคือ "ผลต่าง" ของคะแนน ไม่ใช่ตัวคะแนนเอง บวกเท่ากันทั้งคู่ โอกาสไม่เปลี่ยน

มังคุด มาสคอตมังคุด

มังคุด

ถ้าสองคำตอบได้คะแนนเท่ากันเป๊ะล่ะ?