OpenAI’ın yapay zeka modeli o3, bir kıyaslamada şirketin belirttiğinden daha düşük puan aldı

OpenAI Aralık ayında o3’ü tanıttığında, şirket modelin zorlu bir matematik problemleri kümesi olan FrontierMath’teki soruların dörtte birinden biraz fazlasını yanıtlayabildiğini iddia etmişti. Model, bu skor ile rakiplerini geride bırakmayı başarmıştı. Zira bir sonraki en iyi model FrontierMath problemlerinin yalnızca yüzde 2’sini doğru yanıtlayabilmişti. 

OpenAI araştırma müdürü Mark Chen bir canlı yayında yaptığı açıklamada piyasadaki tüm tekliflerin FrontierMath’te yüzde 2’den daha az performans gösterdiğini belirtirken, agresif test süresi hesaplama ayarlarında o3 ile dahili olarak yüzde 25’in üzerine çıkabildiklerini gördüklerini ifade etti. Söz konusu metrik bir üst sınır olarak konumlanırken, OpenAI’ın geçen hafta halka açık olarak piyasaya sürdüğü modelden daha fazla detaylı ⇒

Alıntının kaynağı: Webrazzi