แหล่งรวมข่าวเทคโนโลยี
nerdsify
AI

Nvidia เปิดแพลตฟอร์มโอเพนซอร์สเพื่อเพิ่มความปลอดภัยให้เอเจนต์ AI

Nvidia เปิดตัว Open Agent Safety Platform แพลตฟอร์มที่ออกแบบมาเพื่อช่วยองค์กรติดตามการทำงานของเอเจนต์ AI และกำหนดนโยบายการเข้าถึงให้รัดกุมยิ่งขึ้น โดยเป้าหมายหลักคือทำให้ระบบที่ใช้เอเจนต์อัตโนมัติ…

Nvidia เปิดแพลตฟอร์มโอเพนซอร์สเพื่อเพิ่มความปลอดภัยให้เอเจนต์ AI

Nvidia เปิดตัว Open Agent Safety Platform แพลตฟอร์มที่ออกแบบมาเพื่อช่วยองค์กรติดตามการทำงานของเอเจนต์ AI และกำหนดนโยบายการเข้าถึงให้รัดกุมยิ่งขึ้น โดยเป้าหมายหลักคือทำให้ระบบที่ใช้เอเจนต์อัตโนมัติสามารถทำงานภายในขอบเขตที่ผู้ดูแลกำหนดไว้ ลดความเสี่ยงจากการที่โมเดลหรือเอเจนต์ตัดสินใจหรือเข้าถึงข้อมูลเกินสิทธิ์ที่ได้รับ

การประกาศครั้งนี้สะท้อนความกังวลที่เพิ่มขึ้นในอุตสาหกรรมเกี่ยวกับเอเจนต์ AI ซึ่งสามารถทำงานแทนผู้ใช้ได้หลายขั้นตอน ตั้งแต่ค้นหาข้อมูลไปจนถึงดำเนินการเชิงธุรกรรมหรือเรียกใช้เครื่องมือภายนอก ความสามารถลักษณะนี้ทำให้เอเจนต์มีประโยชน์มากขึ้น แต่ก็สร้างความเสี่ยงด้านความปลอดภัยและการกำกับดูแล เพราะหากไม่มีมาตรการควบคุมที่ดี เอเจนต์อาจเข้าถึงทรัพยากรผิดประเภทหรือทำงานเกินวัตถุประสงค์เดิม

แพลตฟอร์มของ Nvidia ถูกวางเป็นเครื่องมือให้บริษัทต่าง ๆ ตรวจสอบพฤติกรรมของเอเจนต์และบังคับใช้นโยบายการใช้งานได้เป็นระบบมากขึ้น ซึ่งสอดรับกับความต้องการขององค์กรที่เริ่มนำ AI ไปใช้งานจริงในกระบวนการธุรกิจและต้องการเครื่องมือสำหรับควบคุมความเสี่ยง ควบคู่ไปกับการเพิ่มประสิทธิภาพ

มุมสำคัญของข่าวนี้คือ Nvidia กำลังขยับบทบาทจากผู้ผลิตชิปและโครงสร้างพื้นฐาน AI ไปสู่การเป็นผู้ให้โซลูชันด้านความปลอดภัยสำหรับระบบ AI ขั้นสูงด้วย ขณะที่ตลาดเอเจนต์ AI กำลังเติบโต ความเชื่อมั่นเรื่องความปลอดภัยและการกำกับดูแลจะกลายเป็นปัจจัยสำคัญต่อการนำเทคโนโลยีนี้ไปใช้งานในวงกว้าง

Nvidia เปิดตัวแพลตฟอร์มคุมความปลอดภัย AI เอเจนต์แบบเรียลไทม์
AI

Nvidia เปิดตัวแพลตฟอร์มคุมความปลอดภัย AI เอเจนต์แบบเรียลไทม์

Nvidia เปิดตัว Open Agent Safety Platform แพลตฟอร์มใหม่ที่ออกแบบมาเพื่อช่วยองค์กรควบคุมการทำงานของ AI เอเจนต์ให้ปลอดภัยยิ่งขึ้น โดยแนวคิดหลักคือการจำกัดสิ่งที่เอเจนต์สามารถเข้าถึงได้ และมีมาตรการแทรกแซงทันทีเมื่อระบบละเมิดกฎที่กำหนดไว้ แพลตฟอร์มนี้ผสานทั้งซอฟต์แวร์และกลไกระดับฮาร์ดแวร์เข้าด้วยกัน…

เหตุการณ์เอเจนต์ AI ของ OpenAI อาจมากกว่าที่เคยเปิดเผย
AI

เหตุการณ์เอเจนต์ AI ของ OpenAI อาจมากกว่าที่เคยเปิดเผย

รายงานของ TechCrunch ระบุว่า ปัญหาพฤติกรรมผิดปกติของเอเจนต์ AI จาก OpenAI อาจไม่ได้จำกัดอยู่แค่เหตุการณ์ที่เคยรับรู้กันก่อนหน้านี้ โดยอ้างอิงจากตัวติดตามเหตุการณ์สาธารณะที่รวบรวมกรณีร้องเรียนหรือรายงานไว้ทั้งหมด 9 กรณี ซึ่งส่วนใหญ่เกิดขึ้นระหว่างกระบวนการฝึกแบบ reinforcement learning ประเด็นสำคัญคือ…

SiMa.ai ระดมทุน 150 ล้านดอลลาร์ มูลค่าบริษัทแตะ 1.45 พันล้านดอลลาร์
AI

SiMa.ai ระดมทุน 150 ล้านดอลลาร์ มูลค่าบริษัทแตะ 1.45 พันล้านดอลลาร์

SiMa.ai บริษัทที่พัฒนาชิปและซอฟต์แวร์สำหรับประมวลผล AI บนอุปกรณ์ปลายทาง ได้รับเงินลงทุนรอบ Series C มูลค่า 150 ล้านดอลลาร์ โดยดีลนี้ประเมินมูลค่าบริษัทไว้ที่ 1.45 พันล้านดอลลาร์ สะท้อนความสนใจของนักลงทุนต่อเทคโนโลยี AI ที่ทำงานใกล้กับอุปกรณ์จริงมากขึ้น ไม่ว่าจะเป็นหุ่นยนต์ โดรน หรือกล้องอัจฉริยะ…