ให้ AI ตอบคำถามจากเอกสารบริษัท ต้องเตรียมอะไรบ้าง

จัดเอกสาร เจ้าของข้อมูล และสิทธิ์เข้าถึงก่อนทำ AI ค้นข้อมูลบริษัท พร้อมแนวทางทดสอบคำ⁠ตอบและการอ้างอิง

โดย เผยแพร่ อัปเดต อ่านประมาณ 6 นาที

แฟ้มเอกสารอ้างอิงวางข้าง​แ⁠ท็⁠บ​เล็ตที่แสดงคำ⁠ตอบและเอกสารต้นทาง
ในบทความนี้
  1. เริ่มจากคำถามที่ต้องตอบ ไม่ใช่จำนวน​ไ⁠ฟ⁠ล์​ที่มี
  2. ทำทะเบียนแหล่งความ⁠รู้ให้คนดูแลต่อได้
  3. เตรียมเนื้อหาให้อ่านเป็นเรื่องเดียวกัน
  4. กำหนดหน้า⁠ตาของคำ⁠ตอบที่​ต⁠ร⁠ว⁠จ⁠ส⁠อ⁠บ​ได้
  5. ทดสอบแยกสามเรื่อง: หาเจอ ตอบถูก เปิดเผยถูกคน
  6. วันเปิดใช้เป็นจุดเริ่มของงานดูแล

ก่อนให้ AI ตอบจากเอกสารบริษัท ควรมีคำถามตัวอย่าง แหล่งข้อมูลที่ยืนยันฉบับและเจ้าของได้ สิทธิ์ของผู้ถาม และเกณฑ์ตรวจคำ⁠ตอบพร้อมการอ้างอิง เริ่มทดลองกับเอกสารหนึ่งกลุ่มก่อน เพื่อเห็นจุดที่ต้องปรับและคนที่จะ​รั⁠บ⁠ผิ⁠ด⁠ช⁠อ⁠บ​เมื่อข้อมูลเปลี่ยน

คำถามว่า “เอาเอกสารบริษัทให้ AI อ่านได้ไหม” มักตอบได้ว่าได้ แต่คำถามที่ยากกว่าคือ เมื่อเอกสารสองฉบับให้คำ⁠ตอบไม่ตรงกัน ระบบควรเชื่อฉบับไหน และใครเป็นคนรับรองว่าคำ⁠ตอบนั้นยังใช้ได้อยู่

ก่อนเลือกเครื่อง⁠มือ ลองหยิบคำถามที่พนักงานถามกันจริงหนึ่งเรื่องมาไล่จนถึงต้นทาง วิธีนี้จะเห็นทั้งคุณภาพเอกสาร สิทธิ์เข้าถึง และงานดูแลที่ต้องมีหลังเปิด⁠ใช้⁠งาน

เริ่มจากคำถามที่ต้องตอบ ไม่ใช่จำนวน​ไ⁠ฟ⁠ล์​ที่มี

สมมติฝ่ายบริการต้องตอบว่า “สินค้าที่ซื้อผ่านตัวแทนขอเปลี่ยนได้ที่ไหน” คำ⁠ตอบอาจอยู่ในเงื่อนไขบริการ คู่มือคู่ค้า และประกาศเปลี่ยนขั้น⁠ตอนล่าสุด การมี​ไ⁠ฟ⁠ล์​ครบไม่ได้แปลว่าระบบจะรู้ว่าลูกค้าซื้อผ่านช่องทางใด หรือประกาศฉบับใหม่แทนที่ข้อความส่วนไหน

เขียนคำถามตัวอย่างพร้อมบริบทที่จำเป็น เช่น ประเภทผู้ถาม สินค้าหรือบริการที่เกี่ยวข้อง และวันที่เกิดเหตุการณ์ จาก⁠นั้นให้เจ้าของกระบวนการระบุคำ⁠ตอบที่ยอมรับได้และเอกสารที่รองรับ ถ้ายังหาข้อยุติไม่ได้ในทีม ควรแก้ความขัดแย้งนั้นก่อนนำไปเป็นฐานความ⁠รู้

อย่าเก็บเฉพาะคำถามที่ตอบง่าย ต้องมีคำถามกำกวม คำถามที่เอกสารไม่มีคำ⁠ตอบ และคำถามที่ผู้ถามไม่มีสิทธิ์รู้ด้วย สิ่งเหล่า⁠นี้จะบอกว่าระบบรู้จักถามกลับและหยุดตอบเมื่อจำเป็นหรือไม่

ทำทะเบียนแหล่งความ⁠รู้ให้คนดูแลต่อได้

เริ่มด้วยตารางธรรมดาก็พอ จุดประสงค์คือรู้ว่าแต่ละเรื่องมีแหล่งหลักอยู่ที่ไหนและใครตัดสินความถูกต้องได้ ไม่จำเป็นต้องย้ายทุก​ไ⁠ฟ⁠ล์​เข้าระบบใหม่ทันที

สิ่งที่ควร​บั⁠น⁠ทึ⁠กใช้ตัด⁠สิน⁠ใจอะไร
ชื่อเรื่องและตำแหน่ง​ไ⁠ฟ⁠ล์​ต้นฉบับเปิดย้อนกลับไปตรวจข้อความจริง
เจ้าของเนื้อหาขอคำยืนยันหรือแจ้งข้อ⁠ผิด⁠พลาดกับใคร
วันที่เริ่มใช้และสถานะฉบับข้อความนี้ยังมีผลหรือถูกแทนที่แล้ว
กลุ่มผู้⁠มีสิทธิ์อ่านคำ⁠ตอบนี้เปิดเผยให้ผู้ถามคนใดได้
เรื่องที่ครอบคลุมและข้อยกเว้นป้องกันการนำกฎไปใช้ผิดสถานการณ์

ถ้ามีคู่มือฉบับ​แ⁠ก้⁠ไ⁠ข อย่าเพียงเพิ่ม​ไ⁠ฟ⁠ล์​ใหม่แล้วปล่อยฉบับเดิมเป็นแหล่งตอบที่มีน้ำหนักเท่ากัน ต้องระบุว่าฉบับเก่าเลิกใช้ ถูกแทนที่ทั้งฉบับ หรือยังใช้กับกรณีเก่าบางประเภท

เตรียมเนื้อหาให้อ่านเป็นเรื่องเดียวกัน

ไ⁠ฟ⁠ล์ PDF ที่เปิดอ่านได้ด้วยตาอาจเป็นเพียงภาพ​ส⁠แ⁠ก⁠น ส่วนตารางที่ดูชัดบนหน้ากระดาษอาจเสียความ⁠สัมพันธ์ระหว่างหัวคอลัมน์กับข้อมูลเมื่อดึงออก⁠มาเป็นข้อความ จึงควรทดลองแปลง​ไ⁠ฟ⁠ล์​ตัวอย่างและตรวจผลก่อนนำเอกสารจำนวนมากเข้าไป

สำหรับคู่มือยาว ให้รักษาชื่อเรื่อง หัวข้อย่อย และข้อยกเว้นไว้ด้วยกัน หากข้อความ “อนุ⁠มัติได้โดยหัวหน้าทีม” ถูกแยกออกจากเงื่อนไข “เฉพาะรายการที่ไม่เกินขอบเขตที่กำหนด” คำ⁠ตอบอาจดูมั่นใจแต่ใช้ผิดกรณีได้

เอกสารหลายภาษาไม่ควรถูกมองว่าใช้แทนกันได้เสมอ ถ้าฉบับไทย​อั⁠ป⁠เ⁠ด⁠ต​แล้วแต่ฉบับอังกฤษยังเก่า ต้องระบุสถานะให้ชัด หรือจำกัดคำ⁠ตอบจากฉบับที่เจ้าของเรื่องยืนยันแล้ว

ระบบที่ใช้การค้นเอกสารประกอบคำ⁠ตอบ หรือ RAG จะค้นข้อความที่เกี่ยวข้องแล้วส่งเป็นบริบทให้​โ⁠ม⁠เ⁠ด⁠ล​ตอบ จึงยังต้องอาศัยแหล่งข้อมูลที่จัดเตรียมดีและการควบคุมสิทธิ์ ไม่ได้แก้ความขัดแย้งในเอกสารให้เอง ดูภาพ⁠รวมใน Microsoft Learn: RAG

แฟ้มเอกสารสองชุดแยกจากกัน โดยฉบับที่ผ่านตรวจมีเครื่องหมายถูกและแถบคั่นสีส้ม
ภาพประกอบแนวคิด: คำ⁠ตอบควรผูกกับเอกสารฉบับที่ถูกต้องและสิทธิ์ของผู้ถาม

กำหนดหน้า⁠ตาของคำ⁠ตอบที่​ต⁠ร⁠ว⁠จ⁠ส⁠อ⁠บ​ได้

แทนที่จะตั้งเป้าว่า “ตอบได้เหมือนคน” ให้กำหนดสิ่งที่คำ⁠ตอบต้องแสดง เช่น ข้อสรุป เงื่อนไขสำคัญ แหล่งอ้างอิง และข้อมูลที่ยังต้องถามเพิ่ม โดยอ้างอิงไปยังส่วนที่รองรับคำ⁠ตอบจริง ไม่ใช่แนบ​ลิ⁠ง⁠ก์​เอกสารยาว ๆ ที่มีแค่คำใกล้⁠เคียง

ในสถานการณ์จำลองข้างต้น คำ⁠ตอบที่เหมาะอาจแจ้งว่าช่องทางติดต่อขึ้นอยู่กับประเภทตัวแทน พร้อมขอชื่อช่องทางที่ซื้อและอ้างอิงหัวข้อในคู่มือที่ใช้ตัดสิน หากเอกสารยังไม่ครอบคลุมตัวแทนรายนั้น ควรส่ง⁠ต่อพร้อมคำถามและหลักฐานที่ค้นพบ แทนการเติมเงื่อนไขขึ้นมาเอง

การส่ง⁠ต่อควรบอกพนักงานด้วยว่าระบบติดตรงไหน เช่น พบสองฉบับที่ขัดกัน หรือไม่พบข้อมูลรุ่นสินค้านี้ พนักงานจะได้แก้ฐานความ⁠รู้ได้ ไม่ต้องตอบคำถามเดิมซ้ำทุก⁠ครั้ง

ทดสอบแยกสามเรื่อง: หาเจอ ตอบถูก เปิดเผยถูกคน

เมื่อคำ⁠ตอบผิด ต้องรู้ว่าผิดเพราะค้นไม่พบเอกสารที่ควรใช้ หรือพบแล้วแต่ตีความผิด การแก้สองแบบนี้ต่างกัน แบบแรกอาจต้องปรับข้อมูลและการค้น ส่วนแบบหลังอาจต้องปรับวิธีอธิบายเงื่อนไขและข้อกำหนดการตอบ

ให้ผู้รู้จริงประเมินชุดคำถามที่เตรียมไว้ แล้ว​บั⁠น⁠ทึ⁠ก​อ⁠ย่⁠า⁠ง⁠น้⁠อ⁠ย​ว่าแหล่งอ้างอิงตรงหรือไม่ มีข้อความที่ไม่มีหลักฐานหรือไม่ และควรถามกลับหรือส่ง⁠ต่อหรือไม่ ตรวจแยกทั้งสองภาษาหากจะให้⁠บริการสองภาษา เพราะการผ่านภาษาเดียวไม่ได้⁠รับรองอีกภาษา

ทดสอบสิทธิ์ด้วยบัญชีที่มีสิทธิ์ต่างกัน เอกสารภายในที่ผู้ถามไม่มีสิทธิ์อ่านไม่ควรถูกดึงไปประกอบคำ⁠ตอบตั้ง⁠แต่ต้น การซ่อน​ลิ⁠ง⁠ก์​อ้างอิงภายหลังไม่ได้ป้องกันข้อความลับที่หลุดมาในคำ⁠ตอบ

วันเปิดใช้เป็นจุดเริ่มของงานดูแล

ต้องมีคน​รั⁠บ⁠ผิ⁠ด⁠ช⁠อ⁠บ​เมื่อคู่มือเปลี่ยน ใครอนุ⁠มัติฉบับใหม่ ระบบนำเข้าเมื่อไร และตรวจอย่างไรว่าฉบับเก่าไม่ถูกใช้ตอบต่อ รวม⁠ถึงวิธีถอนเอกสารที่พบว่าผิดโดยไม่ต้องรอแก้ระบบทั้งชุด

บั⁠น⁠ทึ⁠ก​คำถามที่ตอบไม่ได้และข้อ​แ⁠ก้⁠ไ⁠ข​จากพนักงาน เพื่อนำมาปรับแหล่งความ⁠รู้และทดสอบซ้ำ โดยเก็บเฉพาะข้อมูลที่จำเป็นต่อการ⁠ตรวจปัญหา การวัดผลควรดูคุณภาพคำ⁠ตอบที่มีหลักฐานและภาระตรวจ⁠ทานจริง ไม่ใช่เพียงจำนวนข้อความที่ AI ตอบได้

เมื่อจบการเตรียม ควรมีของที่ส่ง⁠ต่อได้สี่อย่าง: รายการคำถามจริง ทะเบียนเอกสาร กติกาการตอบและส่ง⁠ต่อ และผู้ดูแลแต่ละเรื่อง สิ่งเหล่า⁠นี้ทำให้การทดลองตอบคำถามกลายเป็นระบบความ⁠รู้ที่ทีมเชื่อถือและบำรุง⁠รักษาต่อได้

หากฐานความ⁠รู้มีเอกสาร​ส⁠แ⁠ก⁠น​หรือตารางจำนวนมาก ควรอ่านเรื่อง AI อ่านข้อมูลจากเอกสารและจุดตรวจโดยคน ก่อน เพื่อรักษาความหมายของข้อมูลตั้ง⁠แต่ขั้นเตรียม​ไ⁠ฟ⁠ล์

เปลี่ยนเอกสารบริษัทให้เป็นคำ⁠ตอบที่ทีม​ต⁠ร⁠ว⁠จ⁠ส⁠อ⁠บ​ได้

ให้ Talvyn Labs ช่วยวางระบบ AI ค้นและตอบจากข้อมูลบริษัท พร้อมแหล่งอ้างอิง สิทธิ์เข้าถึง และทางส่ง⁠ต่อให้คนตรวจ เริ่มจากคำถามที่ทีมเจอบ่อยกับตัวอย่างเอกสารที่เปิดเผยได้ เพื่อกำหนดขอบเขตทดลองและเกณฑ์วัดคุณภาพคำ⁠ตอบก่อนขยายใช้

คุยเรื่อง AI ค้นเอกสาร

มีโจทย์ธุรกิจ ที่ต้องการ⁠ปรึกษา?

ไม่ว่าจะเป็น​เ⁠ว็⁠บ⁠ไ⁠ซ⁠ต์​ใหม่ การ⁠พั⁠ฒ⁠น⁠า​ผลิตภัณฑ์ หรือการ⁠เชื่อม⁠ต่อระบบ สามารถแจ้งราย⁠ละเอียดทาง​อี⁠เ⁠ม⁠ล เพื่อนัดเวลาปรึกษาได้

ข้อมูลเบื้อง⁠ต้นก็เพียงพอ ราย⁠ละเอียดอื่นสามารถหารือร่วม⁠กันได้ภายหลัง

ติดต่อเรา
ส่ง​อี⁠เ⁠ม⁠ล​ถึงเรา
hello@talvynlabs.com
Facebook