ข้ามไปยังเนื้อหา
Tayakorn
Context Engineering Handbook

Context Engineering Handbook

LEVEL 3 · ระดับสูง

รู้ได้ยังไงว่า context ดีขึ้น — ตัดออกทีละก้อนแล้ววัด

พี่เพิ่มไฟล์คำสั่งเข้าไปสามย่อหน้า แล้วรู้สึกว่ามันตอบดีขึ้น — พิสูจน์ได้ไหมครับ

ส่วนใหญ่พิสูจน์ไม่ได้ และนั่นคือเหตุผลที่ไฟล์คำสั่งของทุกคนมีแต่โตขึ้น ไม่เคยเล็กลง · ไม่มีใครกล้าตัดอะไรออก เพราะไม่มีใครรู้ว่าอันไหนทำงานอยู่จริง

12.1 วิธีเดียวที่ตอบได้ — ตัดออกแล้ววัด

วิธีนี้เรียบง่ายจนน่าตกใจ:

  1. ทำชุดโจทย์ประจำไว้ 10–20 ข้อ ที่พี่รู้คำตอบที่ถูกอยู่แล้ว
  2. รันด้วยบริบทเต็ม จดผลไว้
  3. ตัดออกทีละก้อน แล้วรันชุดเดิมซ้ำ
  4. ก้อนที่ตัดแล้วผลไม่เปลี่ยน = ก้อนที่พี่จ่ายค่าเช่าอยู่ทุกรอบโดยไม่ได้อะไรกลับมา

จุดที่คนทำผิดคือทำกลับด้าน — เอาแต่ เพิ่ม แล้วดูว่าดีขึ้นไหม · การเพิ่มมักดูเหมือนดีขึ้นเสมอ เพราะเราเป็นคนตัดสินเอง และเราเพิ่งลงแรงเพิ่มมันไป

12.2 ตัวเลขที่ดูได้ฟรีทุกครั้ง

จากบทที่ 6 พี่มีตัวเลขสามตัวอยู่แล้วโดยไม่ต้องตั้งอะไรเพิ่ม · เอามาใช้เป็นเครื่องวัดพื้นฐานได้เลย:

  • ผลรวมสามตัว = ขนาดคำขอจริง ดูว่ามันโตขึ้นทุกสัปดาห์ไหม
  • สัดส่วนที่มาจาก cache = สุขภาพของการจัดลำดับ ถ้าตกลงเรื่อย ๆ แปลว่ามีอะไรไปกวนต้นแถว
  • ส่วนที่ต้องอ่านใหม่ = ของที่เปลี่ยนจริงในรอบนี้

12.3 กติกาความซื่อสัตย์สามข้อ

  • อย่าวัดในวันเดียวกับที่เพิ่งแก้ — เราจะเห็นสิ่งที่อยากเห็น
  • อย่าวัดด้วยความรู้สึกว่า "คำตอบอ่านลื่นขึ้น" — ลื่นขึ้นกับถูกขึ้นเป็นคนละเรื่อง
  • เปลี่ยนทีละอย่าง — เปลี่ยนสามอย่างพร้อมกันแล้วดีขึ้น พี่ไม่มีทางรู้ว่าอันไหนช่วย และอาจมีอันหนึ่งกำลังทำร้ายอยู่แต่ถูกกลบ

อ่านแบบเต็มเล่ม