เจาะประเด็น
AI
โมเดลเทพแค่ไหนก็พังได้ ถ้าคุณยังห่อหุ้มมันด้วยระบบกากๆ
แกะรอยงานวิจัยห้าสิบกว่าฉบับ เพื่อหาคำตอบว่าทำไมการจัดการรอบตัว AI ถึงสำคัญกว่าการเปลี่ยนรุ่นโมเดล
ทีมข่าว เอไอไทย.com
⏱ อ่าน 4 นาที
ความลับของ AI ที่เก่งกาจไม่ได้อยู่ที่ตัวมันเอง แต่มันอยู่ที่กรอบและเครื่องมือที่เราเอามาล้อมรอบต่างหาก
พอพูดถึงเรื่องการใช้งาน AI ในยุคนี้ หลายคนคงเคยชินกับการวิ่งไล่ตามโมเดลใหม่ๆ ที่ออกมารายวัน ยิ่งตัวเลขเวอร์ชันสูงขึ้น ยิ่งคิดว่าผลลัพธ์จะต้องดีขึ้นตามไปด้วย แบบว่าจ่ายแพงกว่าหรือใช้ตัวใหญ่กว่าก็น่าจะจบ แต่ความจริงที่คนทำระบบตัวจริงเริ่มเก็ตกันแล้วคือ การเปลี่ยนไปใช้โมเดลใหญ่ขึ้นไม่ได้ช่วยให้อะไรดีขึ้นเสมอไป
หัวใจสำคัญจริงๆ มันอยู่ที่ว่าเราเอาอะไรมาห่อหุ้มโมเดลนั้นไว้ หรือที่เรียกกันในวงการว่า harness ต่างหาก ถ้าออกแบบโครงสร้างตรงนี้ไม่ดี ต่อให้ใช้โมเดลที่ฉลาดที่สุดในสามโลก ผลงานที่ออกมาก็อาจจะเละไม่เป็นท่าได้เหมือนกัน
เรื่องนี้ไม่ใช่แค่ความรู้สึกส่วนตัวเพลินๆ แต่มีตัวเลขจากงานวิจัยของ University of Toronto มายืนยันชัดเจนว่า โมเดลตัวเดียวกันเป๊ะๆ แต่ถ้าออกแบบตัวห่อหุ้มต่างกัน ประสิทธิภาพมันฉีกหนีกันได้ถึงหกเท่าตัว อันนี้คือโคตรจะบ้าและน่าตกใจมากสำหรับคนเขียนโค้ด
ด้วยความสงสัยว่าเบื้องหลังความต่างระดับหกเท่านี่มันมีเคล็ดลับอะไร มีคนตาถึงคนหนึ่งไปนั่งรื้อค้นงานวิจัยเกี่ยวกับเรื่องนี้มาถึงห้าสิบเจ็ดฉบับเต็มๆ เพื่อดูว่าโปรเจกต์เจ๋งๆ เขาทำยังไงกันแน่ โดยขอโฟกัสเฉพาะฝั่งงานพัฒนาซอฟต์แวร์และโค้ดดิ้งเอเจนต์เป็นหลัก เพราะเป็นสนามที่เขาคลุกคลีอยู่
พอเอาข้อมูลจากเอกสารพวกนั้นมารวมกับประสบการณ์ตรง ภาพที่ออกมามันก็น่าสนใจมาก เพราะกฎเหล็กของระบบห่อหุ้มที่ดีที่สุดไม่ได้ซับซ้อนอะไรเลย มันมีแค่สามอย่างสั้นๆ คือ ตัวเล็ก เน้นหลักฐานจริง และต้องคอยตัดแต่งกิ่งก้านใหม่อยู่ตลอดเวลา
อย่างแรกเลยคือการขุดคุ้ยความผิดพลาดครั้งก่อนๆ มาเปลี่ยนเป็นกฎ เพราะทุกครั้งที่เราต้องคอยแก้ทางให้ AI แสดงว่าตอนนั้นมันขาดการชี้1นำหรือการ์ดเรลที่ดีพอ บันทึกความพังพวกนั้นแหละคือวัตถุดิบชั้นดีในการเอามาทำกฎประจำระบบ
ในทางกลับกัน ถ้ามีกฎข้อไหนที่คุณพิสูจน์ไม่ได้ว่ามันช่วยให้งานดีขึ้น หรือถ้าไม่ต้องแก้ทางอะไรมันเลยตั้งแต่แรก ก็ไม่มีความจำเป็นต้องใส่กฎข้อนั้นไว้ให้รก เพราะมันจะกลายเป็นแค่ขยะเสียงรบกวนที่คอยกินพื้นที่ความจำของระบบไปเปล่าๆ
เรื่องความยาวของไฟล์คำสั่งก็เป็นอีกจุดที่คนชอบพลาดกัน OpenAI เคยลองอัดไฟล์คำสั่งขนาดยักษ์เข้าไปทีนึงแล้วผลลัพธ์คือพังไม่เป็นท่า เพราะพอทุกอย่างดูสำคัญไปหมด ผลลัพธ์คือไม่มีอะไรสำคัญสักอย่าง สุดท้ายพวกเขาก็ต้องหั่นมันลดลงมาเหลือแค่ประมาณหนึ่งร้อยบรรทัด โดยให้ไฟล์หลักทำหน้าที่เหมือนสารบัญที่คอยชี้ทางไปหากฎย่อยแทนที่จะยัดทุกอย่างไว้ที่เดียว
ประเด็นเรื่องเครื่องมือก็ฮาไม่แพ้กัน Vercel เคยลองถอดเครื่องมือของเอเจนต์ออกไปถึงแปดสิบเปอร์เซ็นต์ ปรากฏว่าความสำเร็จพุ่งจากแปดสิบเป็นหนึ่งร้อยเปอร์เซ็นต์ แถมปริมาณโทเค็นที่ใช้ยังลดลงไปเกินครึ่ง ส่วนฝั่ง Microsoft ก็รายงานทำทำนองเดียวกันว่าลดเครื่องมือจากหนึ่งร้อยเหลือแค่ห้าตัว น้อยแต่มากมันมีอยู่จริงในโลกเทค
อีกเรื่องที่งานวิจัยชี้ให้เห็นชัดเจนคือ กฎที่เป็นตัวหนังสือเพียวๆ มักไม่ค่อยเวิร์ก มีกฎด้านความปลอดภัยที่เป็นข้อความเขียนบอกเฉยๆ แค่สี่ถึงสิบหกเปอร์เซ็นต์เท่านั้นที่ได้ผลจริง ระบบที่ดีต้องบังคับด้วยสคริปต์จริงๆ เช่นตัวตรวจจับโค้ดหรือเครื่องมือเฉพาะทาง เพราะตัวหนังสือมันเป็นแค่คำแนะนำที่ AI จะทำตามหรือไม่ก็ได้
ทำความสะอาดระบบ
กฎและเอกสารมักจะเก่าและไม่ตรงกับโค้ดจริงตามกาลเวลา ต้องคอยเคลียร์ของเก่าทิ้งก่อนจะเติมของใหม่ และเช็กให้ชัวร์ว่าระบบยังรอดหลังการเปลี่ยนแปลงครั้งใหญ่
พูดง่ายๆ คือวงการออกแบบโครงสร้างห่อหุ้มเอเจนต์ตอนนี้ยังใหม่อยู่มาก การแลกเปลี่ยนสิ่งที่แต่ละคนเจอมาจึงเป็นเรื่องโคตรสำคัญที่จะช่วยให้วงการนี้มันไปต่อได้
เลิกบ้าพลังกับการหาโมเดลที่ใหญ่ที่สุด แล้วหันมาจัดระเบียบโครงสร้างรอบตัวมันให้เรียบ คม และมีระเบียบดีกว่า เพราะของจริงวัดกันตรงนี้
ที่มา: Reddit r/ClaudeAI — อ่านต้นฉบับ
ความคิดเห็น 0
กำลังโหลดความคิดเห็น...