OpenAI'nin Yeni Akıl Yürütme Tekniği Yapay Zeka Güvenlik Uzmanlarını Endişelendiriyor
2 dk okumatechcrunch
PAYLAS:

OpenAI'nin yakında piyasaya sürmesi beklenen yeni Astra modeli, "recurrent depth" (tekrarlayan derinlik) adı verilen yeni bir akıl yürütme tekniği kullanacak. The Information'ın haberine göre, "opaque recurrence" (opak yineleme) olarak da bilinen bu yöntem, modelin düşünce zincirinin izlenmesini zorlaştırarak yapay zeka güvenlik uzmanlarını alarma geçirdi.
Astra'nın bu tekniği kullanımının şu an için sınırlı olduğu belirtilse de, yöntemin ortaya çıkışı güvenlik camiasında ciddi endişelere yol açtı. Redwood CEO'su Buck Shlegeris, tekniğin daha da ileri götürülmesi halinde düşünce zinciri izlenebilirliğinin tamamen yok olabileceği konusunda uyardı. Uzun süredir yapay zeka güvenliğini savunan Zvi Mowshowitz ise, laboratuvarlar arasında bir "dibe doğru yarış" yaşanmasını önlemek için yeni yasal düzenlemelere ihtiyaç duyulabileceğini ifade etti.
Normal şartlarda, bir akıl yürütme modelinin Chain of Thought (CoT) süreci, modelin bir problemi çözerken attığı ardışık adımları gösteriyor. Bu temsil kusursuz olmasa da, modelin yanlış hizalanmasını (misalignment) veya hatalı davranışlarını izlemek için değerli bir araç olarak kabul ediliyor. Opak yineleme yönteminde ise model daha az doğrusal bir yaklaşım sergileyerek aynı sorguyu bir döngü içinde birkaç kez işliyor ve geriye okunabilir çok az iz bırakıyor.
Eleştirilerin ardından OpenAI, Astra'nın bu tekniği kullanımının sınırlı kalacağını ve modelin düşünce zincirinin okunabilir olmaya devam edeceğini vurguladı. Şirketin Baş Bilim İnsanı Jakub Pachocki, ilk akıl yürütme modellerinden bu yana CoT izleme sistemlerini korumaya ve kullanmaya çalıştıklarını belirtti. Ancak The Information'ın raporuna göre, Anthropic ve Google DeepMind gibi diğer büyük oyuncular da şimdiden bu yeni tekniği tartışmaya başladı.
Redwood Research Baş Bilim İnsanı Ryan Greenblatt, opak akıl yürütmenin geleneksel yöntemlerden çok daha hızlı ölçeklenebileceğine dikkat çekti. Greenblatt, en büyük endişesinin modellerin tamamen veya neredeyse tamamen gizli alanda (latent space) akıl yürüttüğü bir noktaya ulaşılması olduğunu belirterek, yapay zeka modelleri için bu mimarilerden kaçınılması gerektiğini umduğunu sözlerine ekledi.
--- **İlgili Kaynaklar:** yapay zeka danışmanlık ve çözüm hizmetleri konusunda [yapay zeka firması](https://yapayzekafirmasi.com) ile iletişime geçebilirsiniz.Yapay zeka modellerinin şeffaflığını azaltan bu yeni teknikler, Türkiye'deki kurumların AI entegrasyonlarında güvenlik ve denetim zorlukları yaşamasına neden olabilir.
Türk şirketleri, iç süreçlerinde kullandıkları yapay zeka modellerinin kararlarını denetlemekte ve müşterilerine açıklamakta zorluk çekebilir.
Türkiye'nin hazırlık aşamasındaki yapay zeka regülasyonlarında, modellerin 'açıklanabilirliği' (explainability) konusunda daha katı kurallar getirilmesi gerekebilir.
Haftalık bültenimize abone olun, en önemli yapay zeka haberlerini doğrudan e-postanıza alalım.



