北京商報訊(記者 魏蔚)3月29日,創新工廠董事長兼零一萬物CEO李開複以“全球視角下的生成式AI展望”為主題,在未來人工智慧先鋒論壇上發表演講。
“ChatGPT 推出之後,大模型智力不斷提升,目前看來遠沒有觸及天花板”,李開複認為,AI 2.0 是有史以來最偉大的科技革命與平臺革命,大模型走出實驗室,穿透各行各業成為驅動實體經濟的新質生產力。他也同時表示,在絕大多數生產力場景里,超大參數量的模型價格昂貴速度緩慢,性價比並不突出。
李開複認為,Scaling Law (規模定律)正從預訓練階段轉向推理階段,也就是慢思考模式。過往預訓練階段的 Scaling Law 是指:有更多的 GPU(圖形處理器)、更多的數據,模型就可以變得更聰明,但目前看其增長趨勢放緩了。新的慢思考 Scaling Law 是指:模型思考的時間更長,就會得出有更優質的結果。目前看來,慢思考 Scaling Law 下,模型性能的成長速度非常快,而且還有很大的增長空間。
“結合這些新的技術創新,現在模型訓練的過程變得非常有意思”,李開複以人類比,先訓練一個“文科生”,讓模型閱讀所有的書籍,然後再向理科方向訓練,讓模型能夠證明數學題、會寫代碼,最終得到的“文理雙全”的模型會非常厲害。
他還提到自己的另一個關注點,“模型性能的提升其實在加速,而不是在放緩。現在進入了‘AI教AI’的時代,模型反覆運算的速度從兩年縮短到三個月。一個重要的原因就是現在很大程度上已經不再單單依靠人來發明新演算法、發明模型架構,而是 AI 借由慢思考具備了反思的能力,能夠自我反覆運算、自我進步,也就是‘AI 教 AI’,AI進入到自我演進範式”。