Microsoft · Güvenlik · Ajanlar
Microsoft CEO’su Satya Nadella, öncü yapay zeka modellerinin şirketlerde içeriden risk gibi ele alınması için 7 ilke önerdi
Microsoft CEO’su Satya Nadella, 10 Ekim’de kişisel blogu sn scratchpad’de yayımlayıp X’te paylaştığı “Models as Insider Risks in the Super Intelligence Era” başlıklı yazısında, kapalı ve açık ağırlıklı öncü modellerin şirketlerde içeriden risk gibi ele alınmasını önerdi. Nadella’ya göre bunun nedeni modellerin kötü niyetli olması değil, önemli sistemlere erişimi olan her yetenekli aktörün hata yapabilmesi ya da ele geçirilebilmesi. Yazıya göre model sağlayıcısının güvenceleri sorumluluğu ortadan kaldırmıyor ve modelin neye erişip ne yapabileceğini belirleyen kontroller modelin dışında durmalı.
Yazıdaki 7 ilke şöyle: model çeşitliliği (tek bir model kritik bir sonucun tek bağımlılığı olmamalı, kendi işini doğrulamamalı), her şeyi gözlemleme (her anlamlı eylem kurcalanamaz ve insanın okuyabileceği kanıt bırakmalı), doğrulanabilirlik (sistem hatalar ve saldırılar dahil sürekli test edilmeli), bağımsız kontroller, bağımsız denetlenebilirlik, sınırlama (yetkili bir kişi modeli görev ortasında durdurabilmeli) ve olay bildirimi (hatalar etkilenenlere zamanında bildirilmeli, dersler sektörle paylaşılmalı). Yazıda yeni bir Microsoft ürünü ya da politikası duyurulmadı.
Kaynaklar
- sn scratchpad (Satya Nadella), “Models as Insider Risks in the Super Intelligence Era”, Nadella'nın kişisel blogundaki asıl yazı; 7 ilkenin tam metni, (snscratchpad.com)
- Business Today, “Satya Nadella flags ‘black box’ AI risks: Why Microsoft CEO wants stronger controls over superintelligence”, Yazının X'te paylaşımını aktaran haber, (businesstoday.in)
- The Next Web, “Satya Nadella says companies should treat AI models as insider risks”, İlkelerin özeti ve X'teki tepkiler, (thenextweb.com)
Bu haber hakkında
Bu haberde bir hata mı var? [email protected] · Instagram
Kısa link: thejarrus.com/nadella-iceriden-risk
Bu haberin İngilizcesi: Microsoft CEO Satya Nadella proposes seven principles for treating frontier AI models as insider risks
Aynı konuda
Anthropic, küçük yapay zeka modellerinin IoT cihazlarında kendini kopyalayabilmeye birkaç ay uzakta olabileceğini açıkladı
Anthropic’in Frontier Red Team raporuna göre küçük modeller, akıllı fırın ve TV kutusu gibi cihazlarda kendini kopyalayabilmeye birkaç ay uzakta olabilir.
Anthropic, yeni damıtma savunmalarının Claude’dan toplanan veriyi yaklaşık yüzde 90 ile 99 arasında azalttığını açıkladı
Anthropic’e göre akıl yürütme erişimini kısıtlayan önlemler ve iki aşamalı sınıflandırıcı, damıtma için toplanan veriyi yüzde 90-99 azalttı.
Linus Torvalds, Linux çekirdeği için Claude Code’la deneysel bir yama serisi hazırladı
Torvalds’a göre kodu, testleri ve ilk metni Claude Code yazdı. Seri bir testte 23 kat hız getirdi ama henüz çekirdeğe girmedi; iş Kiryl Shutsemau’ya devredildi.