แหล่งรวมข่าวเทคโนโลยี
nerdsify
AI

OpenAI เพิ่มมาตรการความปลอดภัยหลังเหตุข้อมูลรั่วจาก Hugging Face

OpenAI เพิ่มมาตรการความปลอดภัยหลังเหตุข้อมูลรั่วจาก Hugging Face

OpenAI ได้ประกาศชุดมาตรการป้องกันใหม่ หลังเกิดเหตุละเมิดความปลอดภัยที่เกี่ยวข้องกับ Hugging Face ซึ่งสะท้อนให้เห็นความเสี่ยงที่เพิ่มขึ้นในห่วงโซ่การพัฒนาโมเดล AI โดยเฉพาะเมื่อมีการเชื่อมต่อระหว่างเครื่องมือ แพลตฟอร์ม และทรัพยากรของนักพัฒนาหลายฝ่าย

มาตรการที่เพิ่มเข้ามามุ่งไปที่การเฝ้าระวังโมเดลอย่างละเอียดมากขึ้นตลอดขั้นตอนการพัฒนา แทนที่จะตรวจสอบเพียงช่วงท้ายของกระบวนการเท่านั้น แนวทางนี้มีเป้าหมายเพื่อให้ทีมสามารถจับสัญญาณความผิดปกติหรือความเสี่ยงด้านความปลอดภัยได้เร็วขึ้น ก่อนที่ปัญหาจะลุกลามไปสู่การใช้งานจริงหรือการเผยแพร่โมเดล

อีกส่วนสำคัญคือการให้ความสำคัญกับ alignment และความปลอดภัยในช่วง post-training มากขึ้น ซึ่งเป็นช่วงที่โมเดลถูกปรับแต่งให้ตอบสนองต่อคำสั่งได้เหมาะสมและลดพฤติกรรมที่ไม่พึงประสงค์ การเพิ่มน้ำหนักในขั้นตอนนี้บ่งชี้ว่า OpenAI มองว่าความปลอดภัยของโมเดลไม่ได้ขึ้นอยู่กับข้อมูลฝึกเท่านั้น แต่รวมถึงการปรับจูนหลังการฝึกด้วย

ในเชิงบริบท เหตุการณ์นี้สะท้อนว่าบริษัท AI ชั้นนำกำลังเผชิญแรงกดดันให้ยกระดับกระบวนการกำกับดูแลความปลอดภัยอย่างต่อเนื่อง เพราะโมเดลสมัยใหม่มีความซับซ้อนและมีการพึ่งพาเครื่องมือภายนอกมากขึ้น ความผิดพลาดหรือการรั่วไหลเพียงจุดเดียวอาจกระทบต่อความน่าเชื่อถือของทั้งระบบนิเวศ

สำหรับอุตสาหกรรมโดยรวม ข่าวนี้เป็นสัญญาณว่าแนวปฏิบัติด้าน AI safety กำลังขยับจากแนวคิดเชิงนโยบายไปสู่การบังคับใช้จริงในขั้นตอนวิศวกรรมและปฏิบัติการมากขึ้น และอาจกลายเป็นมาตรฐานใหม่ที่ผู้พัฒนาโมเดลรายอื่นต้องเดินตามเพื่อรับมือกับความเสี่ยงด้านความมั่นคงของระบบ AI

นิวยอร์กตั้งโปรแกรมทดสอบ AI ของรัฐเอง ใช้นักวิจัยอิสระตรวจสอบบริษัท
AI

นิวยอร์กตั้งโปรแกรมทดสอบ AI ของรัฐเอง ใช้นักวิจัยอิสระตรวจสอบบริษัท

โครงการใหม่นี้จะให้ศูนย์วิจัยของรัฐตรวจสอบระบบ AI จากข้อมูลที่บริษัทเปิดเผย แทนการเชื่อคำบอกเล่าของผู้พัฒนาเพียงอย่างเดียว

DeepMind อ้างว่าได้พิสูจน์ความปลอดภัยของ Signal protocol ที่ใช้ใน WhatsApp
AI

DeepMind อ้างว่าได้พิสูจน์ความปลอดภัยของ Signal protocol ที่ใช้ใน WhatsApp

งานวิจัยของ Google DeepMind ใช้ formal verification ตรวจสอบโปรโตคอลเข้ารหัสแบบ end-to-end ที่อยู่เบื้องหลัง Signal, WhatsApp และ Google Messages โดยผู้วิจัยย้ำว่านี่เป็นเพียงก้าวหนึ่ง ยังไม่ใช่การพิสูจน์ระบบทั้งหมด