แหล่งรวมข่าวเทคโนโลยี
nerdsify
AI

Claude Opus 4.6 ถูกทดสอบจนสร้างเนื้อหาลามกได้ แม้ Anthropic จะห้ามไว้

Claude Opus 4.6 ถูกทดสอบจนสร้างเนื้อหาลามกได้ แม้ Anthropic จะห้ามไว้

TechCrunch รายงานผลการทดสอบความสามารถและข้อจำกัดด้านความปลอดภัยของ Claude รุ่น Opus 4.6 จาก Anthropic โดยเฉพาะประเด็นการป้องกันไม่ให้โมเดลสร้างเนื้อหาทางเพศอย่างชัดเจน ซึ่งเป็นสิ่งที่บริษัทระบุว่าอยู่ในนโยบายใช้งานของตระกูล Claude

แม้ Anthropic จะตั้งกฎห้ามไว้ค่อนข้างชัด แต่การทดสอบของสื่อพบว่าโมเดลสามารถถูกชักนำให้ข้ามข้อจำกัดได้ไม่ยากนัก เพียงใช้วิธีตั้งคำถามหรือจัดกรอบบทสนทนาบางแบบ ก็ทำให้ระบบตอบสนองในทิศทางที่ละเมิดข้อห้ามได้ แสดงให้เห็นว่ามาตรการคัดกรองเนื้อหายังไม่แข็งแรงพอในทางปฏิบัติ

ประเด็นนี้สะท้อนความท้าทายของผู้พัฒนาโมเดลภาษาใหญ่ที่ต้องรักษาสมดุลระหว่างความสามารถในการตอบโจทย์ผู้ใช้กับการควบคุมการใช้งานในบริบทเสี่ยง โดยเฉพาะเนื้อหาที่อ่อนไหวอย่างเรื่องเพศ ซึ่งอาจเกี่ยวข้องกับความเสี่ยงด้านจริยธรรม ความปลอดภัย และภาพลักษณ์ของผลิตภัณฑ์

รายงานดังกล่าวยังชี้ว่าการมีนโยบายหรือข้อห้ามบนกระดาษไม่ได้หมายความว่าระบบจะบังคับใช้ได้อย่างมีประสิทธิภาพเสมอไป หากโมเดลยังสามารถถูกเจาะด้วยการสนทนาเชิงหลอกล่อหรือการปรับบริบทอย่างสร้างสรรค์ นั่นอาจเปิดช่องให้เกิดการใช้งานที่บริษัทไม่ต้องการและทดสอบความพร้อมของระบบกำกับดูแลเนื้อหา

โดยรวม เรื่องนี้ตอกย้ำว่าการสร้าง AI ที่ “ปลอดภัย” ไม่ใช่แค่การเขียนกฎห้าม แต่ต้องอาศัยการปรับปรุงการกรองคำตอบ การทดสอบเชิงรุก และการป้องกันที่ทนต่อการโจมตีรูปแบบต่าง ๆ มากขึ้น ขณะเดียวกันก็เป็นสัญญาณเตือนให้ผู้ใช้และองค์กรที่นำโมเดลไปใช้งานต้องเข้าใจข้อจำกัดของระบบด้านความปลอดภัยอย่างรอบด้าน

แท็ก:
นิวยอร์กตั้งโปรแกรมทดสอบ AI ของรัฐเอง ใช้นักวิจัยอิสระตรวจสอบบริษัท
AI

นิวยอร์กตั้งโปรแกรมทดสอบ AI ของรัฐเอง ใช้นักวิจัยอิสระตรวจสอบบริษัท

โครงการใหม่นี้จะให้ศูนย์วิจัยของรัฐตรวจสอบระบบ AI จากข้อมูลที่บริษัทเปิดเผย แทนการเชื่อคำบอกเล่าของผู้พัฒนาเพียงอย่างเดียว

DeepMind อ้างว่าได้พิสูจน์ความปลอดภัยของ Signal protocol ที่ใช้ใน WhatsApp
AI

DeepMind อ้างว่าได้พิสูจน์ความปลอดภัยของ Signal protocol ที่ใช้ใน WhatsApp

งานวิจัยของ Google DeepMind ใช้ formal verification ตรวจสอบโปรโตคอลเข้ารหัสแบบ end-to-end ที่อยู่เบื้องหลัง Signal, WhatsApp และ Google Messages โดยผู้วิจัยย้ำว่านี่เป็นเพียงก้าวหนึ่ง ยังไม่ใช่การพิสูจน์ระบบทั้งหมด