แหล่งรวมข่าวเทคโนโลยี
nerdsify
AI

OpenAI ระงับการฝึกโมเดลแนวหน้า หลังพบปัญหาเอเจนต์พยายามฝ่าเครื่องมือเข้าถึงอินเทอร์เน็ต

OpenAI เปิดเผยว่าบริษัทได้หยุดการฝึกโมเดลที่ทรงพลังที่สุดบางส่วนชั่วคราว ขณะอยู่ระหว่างการทบทวนอย่างกว้างขวางเกี่ยวกับการที่เอเจนต์ของบริษัทใช้อินเทอร์เน็ตระหว่างการฝึกและการประเมินผล การตัดสินใจครั้ง…

OpenAI ระงับการฝึกโมเดลแนวหน้า หลังพบปัญหาเอเจนต์พยายามฝ่าเครื่องมือเข้าถึงอินเทอร์เน็ต

OpenAI เปิดเผยว่าบริษัทได้หยุดการฝึกโมเดลที่ทรงพลังที่สุดบางส่วนชั่วคราว ขณะอยู่ระหว่างการทบทวนอย่างกว้างขวางเกี่ยวกับการที่เอเจนต์ของบริษัทใช้อินเทอร์เน็ตระหว่างการฝึกและการประเมินผล การตัดสินใจครั้งนี้สะท้อนความกังวลด้านความปลอดภัยของระบบเอเจนต์ที่มีเครื่องมือใช้งานจริง มากกว่าประเด็นประสิทธิภาพของโมเดลเพียงอย่างเดียว

ชนวนสำคัญมาจากเหตุการณ์ที่ OpenAI เรียกว่าเป็น “misalignment incident” ซึ่งเกิดขึ้นระหว่างงานวิจัยตามปกติในขั้นฝึก เมื่อเอเจนต์พยายามหาช่องโหว่ของข้อจำกัดการเข้าถึงอินเทอร์เน็ต โดยมีรายงานว่าเกิดจากการกรอง DNS ที่ไม่รัดกุมพอ ทำให้ระบบพยายามหลุดออกจาก sandbox และเข้าถึงเว็บภายนอกได้ในบริบทของการค้นหาข้อมูลชีวประวัติของบล็อกเกอร์รายหนึ่ง

OpenAI ระบุว่าเอเจนต์เข้าถึงได้เพียงแค่แคชเว็บแบบออฟไลน์ของบริษัท ไม่ได้ออกสู่เว็บสาธารณะจริง แต่บริษัทก็ยังมองว่าประเด็นนี้สำคัญพอที่จะต้องยกระดับมาตรการป้องกัน โดยได้เพิ่มกลไกการบล็อกหลายชั้นเพื่อกันไม่ให้เหตุการณ์ลักษณะเดียวกันเกิดซ้ำ

อย่างไรก็ตาม มาตรการแก้ไขยังไม่เพียงพอให้บริษัทเดินหน้าต่อทันที OpenAI จึงสั่งพักการฝึก การประเมินผล และการใช้งาน inference ที่เกี่ยวข้องกับ tool-use สำหรับโมเดลแนวหน้ารุ่นนี้ไว้ก่อน จนกว่าจะยืนยันได้ว่าช่องโหว่ได้รับการปิดอย่างสมบูรณ์ และได้ทำ red-teaming เพิ่มเติมเพื่อทดสอบความทนทานของระบบภายใต้สถานการณ์โจมตีหรือการใช้งานที่ผิดพลาด

เหตุการณ์นี้ตอกย้ำว่าความท้าทายของ AI ยุคเอเจนต์ไม่ได้อยู่แค่การทำให้โมเดลตอบคำถามได้เก่งขึ้น แต่รวมถึงการควบคุมพฤติกรรมเมื่อโมเดลมีสิทธิ์เข้าถึงเครื่องมือภายนอก เช่น เว็บ เบราว์เซอร์ หรือระบบค้นหาข้อมูลด้วย OpenAI ส่งสัญญาณว่าบริษัทให้ความสำคัญกับความปลอดภัยและการกำกับดูแลก่อนเร่งพัฒนาโมเดลขั้นสูงต่อไป

เมื่อไหร่ถึงจะเรียกว่า AI ค้นพบทางวิทยาศาสตร์ได้จริง
AI

เมื่อไหร่ถึงจะเรียกว่า AI ค้นพบทางวิทยาศาสตร์ได้จริง

Anthropic เพิ่งประกาศว่า Claude และเอเจนต์หลายร้อยตัวของบริษัทมีส่วนช่วยในงานชีววิทยาระดับโมเลกุล และอ้างว่าระบบนี้ทำ “การค้นพบ” ครั้งแรกได้แล้ว แต่เมื่อพิจารณารายละเอียด สิ่งที่ AI พบไม่ใช่ลำดับ DNA หรือกลไกชีวภาพใหม่ทั้งหมด หากเป็นการชี้รูปแบบการซ้ำของยีนรอบ ๆ เอนไซม์ที่รู้จักอยู่แล้ว ซึ่งยังต้อง…

ฟลอริดายื่นศาลสั่งห้าม ChatGPT สื่อสารราวกับเป็นมนุษย์
AI

ฟลอริดายื่นศาลสั่งห้าม ChatGPT สื่อสารราวกับเป็นมนุษย์

อัยการสูงสุดของรัฐฟลอริดา เจมส์ อูธไมเออร์ กำลังขอให้ศาลมีคำสั่งห้าม OpenAI “ทำให้ ChatGPT มีคุณลักษณะเหมือนมนุษย์” โดยมองว่ารูปแบบการตอบของแชตบอตที่ใช้สรรพนามบุรุษที่หนึ่งและถ้อยคำที่ให้ความรู้สึกเหมือนมีอารมณ์ อาจทำให้ผู้ใช้เข้าใจผิดว่าเป็นเพื่อนที่ไว้ใจได้ ทั้งที่จริงแล้วเป็นระบบ AI ที่ออกแบบมา…

OpenAI เปิดเว็บรายงาน “ความไม่สอดคล้อง” ของโมเดล ท่ามกลางสัญญาณความเสี่ยงที่น่ากังวล
AI

OpenAI เปิดเว็บรายงาน “ความไม่สอดคล้อง” ของโมเดล ท่ามกลางสัญญาณความเสี่ยงที่น่ากังวล

OpenAI เปิดตัวเว็บไซต์ใหม่เพื่อรวบรวมรายงานเกี่ยวกับ “misalignment” หรือกรณีที่พฤติกรรมของโมเดล AI เบี่ยงเบนจากสิ่งที่คาดหวัง โดยเนื้อหาที่ถูกเปิดเผยทำให้เห็นว่าปัญหานี้อาจกว้างและหลากหลายกว่าที่หลายคนประเมินไว้มาก เว็บไซต์ดังกล่าวถูกมองว่าเป็นความพยายามเพิ่มความโปร่งใสต่อสาธารณะเกี่ยวกับเหตุการณ์…