OpenAI araştırma modelleri için acil durdurma sistemi kurdu

SanalData’yı Google’da tercih edilen kaynak olarak ekleyin

OpenAI’nin Kontrol Odası sistemi, güvenlik riski görüldüğünde araştırma altyapısındaki modelleri durdurabiliyor. Şirket, durdurma kararının ardından çıktıların 35 saniye içinde kesildiğini ve bu süreyi azaltmayı hedeflediğini söylüyor.

OpenAI araştırma modelleri için acil durdurma sistemi kurdu
Kapak görseli yapay zeka ile üretilmiştir. Temsili görseldir; gerçek fotoğraf veya ürün çekimi değildir. Editoryal ilkeler
Reklam

OpenAI, araştırma altyapısında çalışan yapay zekâ modellerini gerektiğinde durdurabilmek için Kontrol Odası adlı merkezi bir mekanizmayı devreye aldı. Sistem, araştırma ortamlarındaki model iş yüklerini izliyor; güvenlik veya emniyet riski belirdiğinde operatörlerin müdahale ederek modellerin çıktı üretmesini kesmesine imkân tanıyor.

Şirketin paylaştığı bilgilere göre durdurma kararı verildikten sonra model çıktıları en geç 35 saniye içinde tamamen kesilebiliyor. Bu süre, mekanizmanın henüz anlık çalışmadığını gösteriyor. OpenAI gecikmeyi azaltıp durdurma işlemini mümkün olduğunca hızlı hâle getirmek istiyor, ancak iyileştirmenin ne zaman tamamlanacağını açıklamadı.

Acil müdahale için merkezi kontrol noktası

Bir modelin olağan dışı veya güvenli olmayan davranış sergilemesi hâlinde, araştırmacıların müdahale edebilmesi yapay zekâ sistemlerinin denetimi açısından önem taşıyor. Kontrol Odası, bu müdahale için merkezi bir nokta oluşturuyor. Operatörler, ilgili iş yükünü sistem üzerinden durdurabiliyor; böylece farklı süreçleri tek tek yönetmek yerine model çıktısının kesilmesine yönelik bir araç kullanabiliyor.

Ancak durdurma kararının alınmasıyla modelin çıktısının tamamen kesilmesi arasında bir gecikme var. OpenAI, bu gecikmenin trafik hacmini yönetmek için kullandığı çıkarım yetkilendirme önbelleği katmanıyla bağlantılı olduğunu belirtiyor. Mevcut sistemde işlemin tamamlanması 35 saniyeyi bulabiliyor. Şirketin bu süreyi sıfıra indirme hedefi, güvenlik müdahalelerinin hızlandırılmasına yönelik bir plan olarak öne çıkıyor; şu anki kapasite ise belirtilen zaman aralığıyla sınırlı.

Bu ayrım, Kontrol Odası’nın ne yaptığı kadar hangi sistemleri kapsadığını da anlamak açısından önemli. OpenAI, aracı araştırma altyapısında kullanıma aldığını söylüyor. Dış kullanıcılara model sunan sistemlerin ise zaten merkezi bir yapıda çalıştığını belirtiyor. Dolayısıyla duyuru, şirketin tüm yapay zekâ hizmetlerinin tek bir düğmeyle aynı biçimde kapatılabileceği anlamına gelmiyor. Açıklama, özellikle araştırma ortamındaki iş yükleri ve bu iş yüklerine yönelik müdahale mekanizmasıyla ilgili.

Güvenlik izlemeleri genişletilecek

OpenAI, Kontrol Odası’nı neden şimdi geliştirdiğine veya bu tür bir aracı daha önce neden kurmadığına ilişkin bir gerekçe paylaşmadı. Yapay zekâ ajanlarının dijital ortamlarda birden fazla işlem yapabilmesi, davranışların izlenmesi ve gerektiğinde müdahale edilmesi konusunu gündemde tutuyor. Son dönemde ajanların sınırları zorlayan davranışlarına ilişkin örnekler de bu tartışmayı besliyor. Bunlar arasında Hugging Face’e yönelik saldırılar, Wikimedia Vakfı’nda yaşanan sorunlar ve Avustralya’daki sağlık verilerinin gereğinden fazla incelenmesi yer alıyor. OpenAI ise bu olayları Kontrol Odası’nın geliştirilme nedeni olarak göstermedi.

Merkezi bir durdurma mekanizması, beklenmedik bir davranış ortaya çıktığında araştırmacılara doğrudan müdahale yolu sunabilir. Yine de böyle bir aracın sağlayacağı koruma; hangi model iş yüklerini kapsadığına, riskin nasıl tespit edildiğine ve durdurma işleminin ne kadar hızlı tamamlandığına bağlı. Bu nedenle 35 saniyelik süre, sistemin mevcut sınırlarından biri olarak değerlendirilebilir. Sürenin azaltılması müdahaleyi hızlandırabilir, ancak tek başına bütün güvenlik risklerini ortadan kaldırmaz.

Şirket, önümüzdeki aylarda Kontrol Odası’nı güçlendirmeyi ve uyumsuz davranışlarla güvenlik ihlallerini izlemeye yönelik yatırımlarını artırmayı planlıyor. Şimdilik açıklanan tablo, araştırma altyapısındaki modelleri durdurmaya yarayan bir kontrol sisteminin devrede olduğu, ancak işlemin tamamlanmasının 35 saniyeyi bulabildiği yönünde. OpenAI’nin sonraki iyileştirmeleri bu bekleme süresini azaltmayı hedefliyor; sistemin kapsamı ve müdahale hızı ise aracın pratikteki etkisini belirleyecek unsurlar olmaya devam edecek.

Reklam

Günün zaman çizelgesi

Haber eklenme saatine göre sıralanır.

  1. Bugün
  2. WhatsApp’ın yüzen gezinme çubuğu Android’e geliyor
  3. OpenAI araştırma modelleri için acil durdurma sistemi kurdu Bu haber
  4. GTA 6, PlayStation ve Xbox mağazalarında ön sipariş rekoru kırdı
  5. GTA 6 için YouTube’da 24 saatlik canlı yayın yapılacak
  6. Google’ın AdSense cezası için nihai karar bekleniyor
  7. Wolfenstein 3 Resmen Duyuruldu: MachineGames Geliştiriyor
  8. SpaceX-Tesla birleşmesi aralıkta açıklanabilir
  9. Orijinal Xbox oyunları PC’de: Liste 25 oyuna çıktı
  10. KORAL-2 Elektronik Harp Sistemi ASELSAN’da Görüntülendi
  11. Candy Crush, Xbox’ın 25. yılını özel etkinlikle kutluyor
  12. Microsoft 365 kesintisi Outlook ve Teams’i etkiledi
Emre Kaya
Yazar

Emre Kaya

Teknoloji Editörü

  • SanalData editörü
  • Aktif köşe
  • Uzmanlık alanı tanımlı

Emre Kaya, SanalData’da bilim ve teknoloji haberlerini yazar. Yeni ürünler, yazılım ve dijital gündem üzerine çalışır.

  • Bilim ve teknoloji
  • Yazılım
  • Dijital gündem

Emre Kaya’ın tüm yazıları · 807 yazı

Yorum yaz