OpenAI推出PaperBench基準，測試AI智能體復現前沿AI研究能力

2025年4月2日，OpenAI宣布推出PaperBench，一個旨在評估AI智能體復現前沿AI研究能力的新基準。 PaperBench要求智能體從零開始復現20篇ICML 2024年被選為Spotlight和Oral的論文，任務包括理解論文的貢獻、開發相關代碼庫並成功執行實驗。

在PaperBench上進行的多項測試中，Claude 3.5 Sonnet（新版）表現出色，結合開源框架，平均復現得分為21.0%。儘管Claude 3.5的表現較為突出，但OpenAI發現其仍未能超越人類的基線表現，進一步測試由頂尖機器學習博士進行，顯示智能體的複現能力尚有提升空間。

據外媒報導，OpenAI旗下的ChatGPT付費訂閱用戶已突破2000萬，較2024年底的1550萬增長了30%。

ChatGPT的月收入已達到至少4.15億美元，年收入約50億美元，而OpenAI也在推廣200美元/月的Pro版，實際收入可能更高。