ให้ AI ตอบจาก SOP ด้วย RAG
เข้าใจการค้นเอกสาร ใส่บริบท และตอบโดยไม่แต่งนโยบายที่ไม่มีในแหล่งข้อมูล
เป้าหมาย: แยกคำตอบที่เอกสารรองรับออกจากคำตอบที่ต้องถามเจ้าของนโยบาย · ใช้เวลาประมาณ 10 นาที
RAG สามขั้นแบบย่อ
RAG ไม่ใช่การฝึกโมเดลใหม่
รับคำถาม
ทำความเข้าใจสิ่งที่ผู้ใช้ต้องการ
ค้นส่วนเอกสาร
เลือกข้อความจาก SOP ที่เกี่ยวข้อง
ตอบพร้อมขอบเขต
ใช้เฉพาะหลักฐานที่พบและบอกเมื่อข้อมูลไม่พอ
SOP ร้านออนไลน์จำลอง
เอกสารระบุว่าเปลี่ยนสินค้าได้ใน 7 วันเมื่อยังไม่ใช้งาน แต่ไม่ได้ระบุผู้จ่ายค่าส่ง
ตอบเกินเอกสาร
ร้านออกค่าส่งคืนให้ทั้งหมดค่ะ
ดูผลลัพธ์ตัวอย่าง
ฟังดูช่วยลูกค้า แต่เป็นการแต่งนโยบายที่ SOP ไม่มี
ตอบตามหลักฐาน
เปลี่ยนได้ภายใน 7 วันหากยังไม่ใช้งาน ส่วนค่าส่งคืนเอกสารนี้ไม่ได้ระบุ ขอให้เจ้าหน้าที่ตรวจนโยบายล่าสุดก่อนยืนยัน
ดูผลลัพธ์ตัวอย่าง
ตอบส่วนที่รู้และส่งต่อส่วนที่ไม่มีหลักฐาน
RAG ล้มเหลวได้ตรงไหน
ค้นผิดส่วน
คำถามเรื่องคืนเงิน แต่ระบบหยิบเอกสารเปลี่ยนไซซ์
คำตอบอาจอ้างเอกสารจริงแต่ไม่ตอบคำถาม ต้องประเมินความเกี่ยวข้องของการค้นหา
เอกสารล้าสมัย
ระบบหยิบ SOP ปี 2024 แทนฉบับ 2026
RAG ไม่รู้เองว่าเอกสารใดมีผล ต้องจัดเวอร์ชันและวันหมดอายุ
เอกสารขัดกัน
FAQ บอก 7 วัน แต่สัญญาบอก 3 วัน
ระบบควรแสดงความขัดแย้งและส่งต่อเจ้าของนโยบาย ไม่เลือกคำตอบเอง
ออกแบบคำตอบจากคู่มือโรงแรม
แขกถามว่าสามารถเช็กอินก่อนเวลาและนำสัตว์เลี้ยงเข้าพักได้หรือไม่ ระบบค้นพบเพียงข้อความว่าเช็กอินมาตรฐาน 14:00 น. แต่ไม่พบเรื่องสัตว์เลี้ยง
เขียนโครงคำตอบที่ใช้หลักฐานเท่าที่มีและระบุขั้นตอนต่อไป
ดูคำตอบตัวอย่าง
แจ้งว่าเวลาเช็กอินมาตรฐานคือ 14:00 น. ตามคู่มือที่พบ ส่วนการเช็กอินก่อนเวลาและนโยบายสัตว์เลี้ยงยังไม่มีข้อมูลเพียงพอ จึงต้องให้พนักงานตรวจห้องว่างและนโยบายล่าสุดก่อนยืนยัน
- ตอบเฉพาะสิ่งที่เอกสารรองรับ
- แยกสิ่งที่ไม่พบ
- ไม่แต่งนโยบาย
- กำหนดผู้รับผิดชอบตรวจต่อ
ตรวจแหล่งอ้างอิง
หากค้นไม่พบเงื่อนไขค่าส่งคืน ระบบควรทำอะไร
- ก. ใช้นโยบายที่ร้านทั่วไปมักใช้
- ข. ระบุว่าเอกสารไม่รองรับและขอการยืนยัน
ดูคำตอบและคำอธิบาย
ข. ระบุว่าเอกสารไม่รองรับและขอการยืนยัน RAG ลดการเดาได้เมื่อระบบยอมรับว่าแหล่งข้อมูลไม่มีคำตอบ
บันทึกช่วยจำ
- RAG ที่ดีต้องดูทั้งคุณภาพการค้นหาและคุณภาพเอกสาร
- เอกสารเก่าหรือผิดยังทำให้คำตอบผิดได้
- บทถัดไปจะทบทวนการเลือกเครื่องมือ การสร้างคำตอบ การจัดบริบท และการตรวจหลักฐานร่วมกัน
สรุปบทเรียนนี้
- ค้นเอกสารที่เกี่ยวข้องก่อนสร้างคำตอบ
- คำตอบต้องไม่เกินหลักฐาน
- ต้องประเมินการค้นหา เวอร์ชันเอกสาร และความขัดแย้ง