亚洲第一福利视频,欧美黑人粗大xxxxpp,国内精品一区二区三区,国产精品久久久久影院色

智快網 - 新科技與新能源行業網絡媒體

xAI開源3140億參數大模型Grok-1 科技界掀起新熱潮

   發布時間:2024-03-18 16:54

【智快網】3月18日消息,近日,科技界掀起了一股新的熱潮。馬斯克旗下的人工智能公司xAI在周日的官方聲明中,震撼宣布其大語言模型Grok-1正式開源。此舉意味著,公眾可以訪問github.com/xai-org/grok,按照指引獲取并使用該模型的權重和網絡架構。

據悉,Grok-1是一款混合專家模型,擁有驚人的3140億參數,這一數字在目前所有已開源的大語言模型中獨占鰲頭。如此龐大的參數規模,無疑將為大語言模型領域帶來前所未有的變革與突破。

據智快網了解,Grok-1是xAI團隊從頭開始訓練的模型,其預訓練階段已于去年10月圓滿完成。此次開源的是預訓練結束時的原始基礎模型檢查點,尚未針對任何具體應用進行微調。這意味著,開發者們可以根據自身需求,對Grok-1進行進一步的定制和優化。

xAI在官網上透露,Grok-1是在海量文本數據上訓練的基礎模型,其訓練過程采用了JAX和Rust編程語言,并借助了團隊自定義的訓練棧。如今,該模型的權重和架構已按照Apache 2.0開源許可協議公開發布,為全球范圍內的研究者和開發者提供了寶貴的資源。

盡管Grok-1的開源時間相較于馬斯克在社交媒體上公布的時間有所延遲,但這并未影響其在科技界的熱度。事實上,這一開源行動標志著人工智能領域的一大進步,為整個行業注入了新的活力。

關于開源時間的定義,不同國家和地區可能存在差異。然而,按照國際標準化組織ISO 8601的規定,Grok-1的開源時間仍在馬斯克所提及的那一周范圍內。這一細節雖然引發了部分討論,但并未影響Grok-1作為一款重要開源大語言模型的地位和影響力。

 
 
更多>同類內容
全站最新
熱門內容
本欄最新
 
智快科技微信賬號
ITBear微信賬號

微信掃一掃
加微信拉群
電動汽車群
科技數碼群