Microsoft เพิ่มฟีเจอร์คุมเข้ม Prompt และ AI Hallucination ในเครื่องมือ Azure AI Studio

Azure AI Studio เป็นเครื่องมือระดับองค์กรเพื่อสร้างนวัตกรรม AI จากข้อมูลองค์กรที่ตนมี เช่น บอท เครื่องมือค้นหา ผู้ช่วย AI ในการทำงานด้านต่างๆ โดยถูกประกาศออกมาในช่วงพฤศจิกายนปี 2023

ล่าสุด Microsoft ได้เพิ่มฟีเจอร์ใหม่และแผนในอนาคตที่จะช่วยควบคุมการทำงานของโมเดล AI เหล่านั้น

ฟีเจอร์ที่ถูกปล่อยออกมาพร้อมทดลองแล้วคือ Prompt Shields ว่าด้วยเรื่องของการควบคุมคำสั่งที่มีข้อกังวลแล้วว่าผู้ไม่หวังดีอาจส่งคำสั่งบางอย่างที่ทำให้ AI เผยถึงข้อมูลที่ไม่พึงประสงค์หรือไม่เหมาะสมตามวัตถุประสงค์การใช้งาน โดยนักพัฒนาสามารถควบคุม input การใช้งาน prompt หรือปิดบังข้อมูล input ที่นำเข้ามาได้

อาการหลอนของโมเดล LLM (Hallucination) อาจนำไปสู่ผลลัพธ์ที่ไม่ได้มาจากข้อมูลที่เรียนรู้มา ซึ่งไม่ควรนำข้อมูลไปใช้งานต่อ โดยฟีเจอร์ groundedness detection จะเปิดทางให้นักพัฒนาสามารถทดสอบโมเดลของตนเพื่อวัดค่าที่เรียกว่า ‘groundedness metrics’ ก่อนนำไปใช้จริงได้ นอกจากนี้ฟีเจอร์ยังมีการให้ความน่าเชื่อถือของผลลัพธ์ที่ออกมา ประกอบการตัดสินใจของผู้ใช้ก่อนนำไปใช้ได้

ยังมีอีกหลายฟีเจอร์ที่ Microsoft คาดว่าจะเปิดตัวในอนาคต เช่น การทำให้นักพัฒนากำหนดความสามารถของโมเดลถึงขอบเขตที่สนใจ หรือสร้างตัวอย่างการใช้งานให้ผู้ใช้ โดยความสามารถนี้เรียกว่า System Message Framework

หากองค์กรต้องการประเมินติดตามความเสี่ยงของโมเดล AI ทาง Microsoft ยังนำเสนอเครื่องมือที่เรียกว่า Safety Evaluation และ Risk & Safety Monitoring โดยหวงให้นักพัฒนาทราบถึง input ที่น่าจะสร้างปัญหา นำไปสู่อาการหลอนหรือเนื้อหาที่ไม่พึงประสงค์เพื่อจะได้หาทางป้องกัน

ที่มา : https://www.darkreading.com/application-security/microsoft-adds-tools-for-protecting-against-prompt-injection-other-threats-in-azure-ai และ https://www.scmagazine.com/brief/new-azure-ai-security-tools-unveiled

About nattakon

จบการศึกษา ปริญญาตรีและโท สาขาวิศวกรรมคอมพิวเตอร์ KMITL เคยทำงานด้าน Engineer/Presale ดูแลผลิตภัณฑ์ด้าน Network Security และ Public Cloud ในประเทศ ปัจจุบันเป็นนักเขียน Full-time ที่ TechTalkThai

Check Also

Bitdefender MDR: ผสมผสาน ‘ บุคลากร, กระบวนการ และ เทคโนโลยี’ เพื่อปกป้องระบบธุรกิจสำคัญตลอด 24/7

การโจมตีไซเบอร์ในปัจจุบันมักเกิดขึ้นนอกเวลาทำการ อาจเป็นกลางดึกหรือวันหยุด ซึ่งเป็นช่วงที่ทีมไอทีส่วนใหญ่ไม่ได้เฝ้าระวัง ปัญหาจึงไม่ได้อยู่ที่คุณภาพของเทคโนโลยีป้องกันภัย แต่อยู่ที่ว่ามี บุคลากรคอยตรวจสอบและตอบสนองต่อสัญญาณเตือนตลอดเวลาหรือไม่ Bitdefender Managed Detection and Response (MDR) จึงถูกออกแบบมาเพื่อเติมเต็มช่องว่างนี้ ด้วยการรวมทีมผู้เชี่ยวชาญที่เฝ้าระวังตลอด 24 …

ปรับกลยุทธ์ Enterprise Infrastructure ที่ Symphony Communication มองว่า Public Cloud อาจไม่ใช่คำตอบเดียวเสมอไป

องค์กรส่วนใหญ่ที่ตัดสินใจย้ายระบบขึ้น Public Cloud หวังผลด้านความรวดเร็วและความยืดหยุ่น แต่เมื่อเวลาผ่านไปกลับพบปัญหาต้นทุนที่พุ่งสูงขึ้น ควบคู่กับความซับซ้อนในการบริหารจัดการ และความเสี่ยงด้าน Ransomware ที่รุนแรงขึ้น จนทิศทางการขึ้น Public Cloud อาจไม่ใช่คำตอบสุดท้ายในการบริหารจัดการองค์กรในยุคนี้ ภายในงาน Enterprise …