FINCOSMOS: Yapay Zeka Ajanlarını Finans Dünyasında Sınamak

Finansal alanda yapay zeka ajanlarına güvenmek zor. Veriler internetten gelir, strateji kullanıcının kafasında yaşar ve doğruluk zamana bağlıdır. Yanlış veri, talep edilmemiş bir strateji veya gelecek bilgisini kullanarak yapılan bir geri test, hepsi de ikna edici bir rapor üretebilir. Mevcut kıyaslama sistemleri bu sorunları ölçmek yerine ortadan kaldırıyor: görevi, veriyi veya zaman çizelgesini sabitleyor.

ArXiv'de yayınlanan FINCOSMOS, bu boşluğu kapatmak için geliştirilmiş bir değerlendirme paradigması. Sistem, gerçek dünyayı simüle ediyor: gizli bir strateji tutulur, ajan hiçbir veri almadan başlar ve internetten bilgi toplamak zorunda kalır. Sonra kendi geri testini kurar, ama yalnızca o anki verilerle, gelecek bilgisi olmadan.

Bu yaklaşımın güçlü yanı, referans cevaba ihtiyaç duymaması. Sistem, zamansal doğruluğu doğrudan programlar aracılığıyla kontrol ediyor. Ajan başarısız olabilir çünkü yanlış veri çeker, stratejiyi yanlış anlar veya geri testi hatalı kurar, gerçek dünyada olduğu gibi.

Finansal ajanlar giderek daha çok kullanıcılar için açık web üzerinde çalışıyor. FINCOSMOS gibi sağlam değerlendirme sistemleri olmadan, bu ajanların ne kadar güvenilir olduğunu bilmek zor. Araştırma, yapay zekanın para yönetiminde kullanılmadan önce ne tür riskleri taşıyabileceğini gösteriyor.