国产精品久久久久久久久久久久午衣片,国产成人精品男人的天堂网站,熟女一区二区中文字幕,亚洲精品国产精品乱码在线

免費、開(kāi)源且堪比GPT 4!Meta在訓練Llama 3了?

有消息稱(chēng),Meta正在開(kāi)發(fā)比GPT4更強大的人工智能大模型Llama3,開(kāi)源且免費!

據人工智能新聞網(wǎng)站the decoder,這是OpenAI工程師、前谷歌大腦工程師Jason Wei在Meta組織的Generative AI Group社交活動(dòng)中無(wú)意中聽(tīng)到的消息。


(資料圖片僅供參考)

Wei表示,他注意到Meta現在有足夠的計算能力來(lái)訓練Llama3和4。Llama3計劃達到GPT-4的性能水平,但仍將免費提供。

不過(guò),目前還沒(méi)有關(guān)于Llama3何時(shí)發(fā)布甚至是否發(fā)布的官方聲明。從今年2月發(fā)布的Llama1到7月的Llama2,Meta花了大約五個(gè)月的時(shí)間。

但值得一提的是,GPT-4具有比Llama標準版更復雜的架構。文章稱(chēng),GPT-4可能通過(guò)使用更復雜的專(zhuān)家混合架構來(lái)實(shí)現其高性能,該架構具有16個(gè)專(zhuān)家網(wǎng)絡(luò ),每個(gè)網(wǎng)絡(luò )具有約1110億個(gè)參數。

因此,從Llama 2跳到Llama 3可能不只是簡(jiǎn)單地進(jìn)行擴展,并且可能比從Llama 1跳到Llama 2需要花費更長(cháng)的時(shí)間。

Llama2在某些應用中達到了GPT-3.5的水平,并且還通過(guò)微調和額外功能由開(kāi)源社區進(jìn)行優(yōu)化。

例如,最近發(fā)布的基于Llama2的CodeLlama,通過(guò)微調在Human Eval編碼基準測試中達到了GPT-3.5和GPT-4水平的結果(取決于測量類(lèi)型)。

然而,在關(guān)于Llama2的論文中,Meta自己指出,與GPT-4和谷歌的PaLM-2等閉源模型之間仍存在巨大的性能差距。

所以可以說(shuō),Llama2在某些方面達到了GPT-3.5的水平,但與最先進(jìn)的閉源模型GPT-4相比,仍存在明顯的差距。它主要的優(yōu)勢在于其開(kāi)源性,即允許研究人員和開(kāi)發(fā)者基于它進(jìn)行調優(yōu)和創(chuàng )新。

英國《金融時(shí)報》7月中旬報道稱(chēng),Meta開(kāi)發(fā)Llama模型的主要目標是,打破OpenAI在大語(yǔ)言模型(LLM)市場(chǎng)的主導地位。Meta可能會(huì )嘗試將Llama模型建立為L(cháng)LM市場(chǎng)的一項支持技術(shù),類(lèi)似于谷歌在移動(dòng)市場(chǎng)上對Android所做的事情,以便稍后推出更多產(chǎn)品。此外,Meta還從開(kāi)源社區模型的快速開(kāi)發(fā)中受益。

OpenAI首席執行官Sam Altman于6月上旬表示,GPT-5距離訓練發(fā)布還很遠。谷歌計劃在今年年底或明年初推出下一代多模態(tài)LLM Gemini。

風(fēng)險提示及免責條款 市場(chǎng)有風(fēng)險,投資需謹慎。本文不構成個(gè)人投資建議,也未考慮到個(gè)別用戶(hù)特殊的投資目標、財務(wù)狀況或需要。用戶(hù)應考慮本文中的任何意見(jiàn)、觀(guān)點(diǎn)或結論是否符合其特定狀況。據此投資,責任自負。

關(guān)鍵詞: