美股
基金
外匯、加密貨幣
滬、深港通
港股
 
納斯達克
 
恆生指數
 
道瓊斯
 
標準普爾
 
 
新聞分享
如欲分享新聞,請填寫收件人及閣下之電郵,再按「送出」。*必需填寫
收件者電郵*
請用分號「;」分隔不同電郵地址,例子:[email protected];[email protected]
閣下之電郵*
分享內容
R2模型5月前推出?DeepSeek開源第三彈「300行DeepGEMM代碼」 網友憂輝達股價
本星期是中國 AI 新創公司 DeepSeek 的開源周,DeepSeek 則在第三天,發佈了 DeepGEMM,是一個支援稠密和 MoE 模型的 FP8 GEMM(通用矩陣乘法) 計算庫,僅憑 30...
重設
送出
視窗將於5秒內關閉
R2模型5月前推出?DeepSeek開源第三彈「300行DeepGEMM代碼」 網友憂輝達股價
鉅亨網新聞
推薦
2
利好
5
利淡
2
 
 

本星期是中國 AI 新創公司 DeepSeek 的開源周,DeepSeek 則在第三天,發佈了 DeepGEMM,是一個支援稠密和 MoE 模型的 FP8 GEMM(通用矩陣乘法) 計算庫,僅憑 300 行代碼就超過專家優化的內核,可為 V3/R1 的訓練和推理提供強大支援,更令人興奮的是,DeepSeek-R2 有望在 5 月前提前發佈。

中國 AI 媒體《新智元》報導,DeepGEMM 庫具有五大特徵,分別是在 Hopper GPU 上實現高達 1350+ FP8 TFLOPS 的算力、極輕量級依賴且代碼清晰易懂、完全即時編譯、核心邏輯僅約 300 行代碼,卻在大多數矩陣規模下超越專家級優化內核以及同時支援密集佈局和兩種 MoE 架構。

對於僅憑 300 行代碼就超過專家優化的內核,開發者驚嘆道:「不是 DeepSeek 真的破解了 GPU 運算的天機,要麼我們就是見證了有史以來最高級的編譯器黑科技。」還有開發者說:「DeepGEMM 聽起來簡直是數學界的超級英雄,比飛快的電腦還快。它改變了我們使用 FP8 GEMM 庫的方式,簡單、快速、開源。 這就是 AI 計算的未來!」

DeepGEMM 採用了全 Just-In-Time 編譯 技術,所有 kernel 都在運行時動態編譯,無需在安裝時進行任何預編譯,這意味著可即裝即用 DeepGEMM,省去大量的配置和編譯時間,使得開發者更專注於模型開發和實驗。JIT 設計也帶來額外的優勢,可根據不同的 GEMM 形狀、block size 等參數進行動態最佳化,始終選擇最佳的 kernel 配置,保證在各種場景下都能發揮最佳效能。

目前,DeepGEMM 僅支援 NVIDIA Hopper 張量核。為解決 FP8 張量核在累加計算時的精度問題,DeepGEMM 採用了基於 CUDA 核心的兩級累加(提升)技術。雖然 DeepGEMM 借鑒 CUTLASS 和 CuTe 的一些概念,但避免過度依賴它們的範本或代數系統。

相反地,DeepGEMM 追求設計簡潔,僅包含一個核心內核函數,代碼量僅約 300 行,這使其成為學習 Hopper FP8 矩陣乘法和優化技術的理想入門資源。

儘管採用輕量級設計,DeepGEMM 在處理各種矩陣形狀時的性能都能夠達到甚至超越經專家調優的庫。

與此同時,《路透社》引述消息人士報導指出,原定 5 月初發佈的 DeepSeek-R2 將提前。知情人士透露,DeepSeek 決策層希望大幅加快這一進程。不過,截至目前,相關人士並未透露 DeepSeek 的 R2 模型的具體發佈日期,這也讓業界對其充滿了好奇與期待。

從技術層面來看,這一全新的 R2 模型被寄予厚望,料將具備更強大的能力,尤其是在代碼生成方面,有望生成更優質、高效的代碼。

此外,R2 模型預計還將能使用英語以外的多種語言進行推理,這一特性將顯著提升其在多語言環境下的應用潛力。

業內人士預測,DeepSeek-R2 的發佈將是 AI 行業的一個關鍵時刻。目前 DeepSeek 在創建高成本效益模型上的成功,已經打破該領域少數主導玩家的壟斷。

另據《智東西》報導,DeepGEMM 一發佈後,DeepSeek 的推文評論區好評如潮,甚至有人為輝達 (NVDA.US)      股價擔心,還有人熱情誇讚新代碼庫和 DeepSeek 工程師。

DeepSeek 也分享了清楚指南,使用 DeepGEMM 需要 Hopper 架構 GPU、必須支援 sm_90a,要求是 Python 3.8、CUDA 12.3、PyTorch 2.1、CUTLASS 3.6 或更新版本。DeepSeek 強烈推薦 CUDA 12.8 或更高的版本以獲得最佳性能。

(美股為即時串流報價; OTC市場股票除外,資料延遲最少15分鐘。)
新聞來源 (不包括新聞圖片): 鉅亨網
相關股份
0/0
公佈日期
指標
暫時沒有相關新聞。
 
美股網站地圖
支援電郵: [email protected]
阿斯達克網絡信息有限公司 (AASTOCKS.COM LIMITED) 版權所有,不得轉載
免責聲明
閣下明確同意使用本網站/應用程式的風險是由閣下個人承擔。

AASTOCKS.com Ltd、香港交易所資訊服務有限公司、中國投資信息有限公司、深圳證券信息有限公司、Nasdaq, Inc.、其控股公司及/或該等控股公司的任何附屬公司、或其資訊來源及/或其他第三方數據供應商均竭力確保所提供資訊的準確和可靠度,但不能保證其絕對準確和可靠,且亦不會承擔因任何不準確或遺漏而引起的任何損失或損害的責任(不管是否侵權法下的責任或合約責任又或其他責任)。

AASTOCKS.com Ltd、香港交易所資訊服務有限公司、中國投資信息有限公司、深圳證券信息有限公司、Nasdaq, Inc.、其控股公司及/或該等控股公司的任何附屬公司、或其資訊來源及/或其他第三方數據供應商均對資訊不作任何明示或隱含的要約、陳述或保證 (包括但不限於可銷售性及特殊用途合適性的資訊保證) 。

AASTOCKS.com Ltd、香港交易所資訊服務有限公司、中國投資信息有限公司、深圳證券信息有限公司、Nasdaq, Inc.、或其控股公司及/或該等控股公司的任何附屬公司、或其資訊來源及/或其他第三方數據供應商不會就任何原因導致的中斷、不準確、錯誤或遺漏或因此而造成的任何損害賠償(不論直接或間接、相應而生、懲罰性或懲戒性)對任何人承擔責任。

AASTOCKS.com Ltd不負責,亦不承擔任何由於不可抗力的事故或在AASTOCKS.com Ltd不可合理控制的情況下導致的損失或損害,如颱風、暴雨、其他自然災難、政府或有關機構的限制、騷動、戰爭、病毒爆發,網絡故障或電信故障,引致AASTOCKS.com Ltd不能履行協議內的責任或提供服務。

Morningstar 免責聲明:版權所有©2020 Morningstar,Inc。保留所有權利此處包含的資料,數據,分析和意見(“信息”):(1)包含Morningstar及其內容提供者的專營資料; (2)除特別授權外,不得複製或轉載; (3) 不構成投資建議; (4)僅供參考,(5)並未為所載資料的完整性、準確性及時間性作出保證。Morningstar對於閣下使用任何相關資料而作出的任何有關交易決定、傷害及其它損失均不承擔任何責任。 請在使用所有資料前作出核實,並且在諮詢專業投資顧問意見前勿作任何投資決定。 過往業績並不代表將來表現,任何投資項目的價值及所得收入皆可升可跌。

本網站/應用程式包含的內容和信息乃根據公開資料分析和演釋,該公開資料,乃從相信屬可靠之來源搜集,這些分析和信息並未經獨立核實和AASTOCKS.com Limited並不保證他們的準確性、完整性、實時性或者正確性。

在本網站/應用程式的資料、金融市場數據、報價、圖表、統計數據、匯率、新聞、研究、分析、購買或者出售評分、財金教學及其他資訊僅作參考使用,在根據資訊執行證券或任何交易前,應諮詢獨立專業意見,以核實定價資料或獲取更詳細的市場信息。AASTOCKS.com Limited不應被視為游說任何訂戶或訪客執行任何交易,閣下須為所有跟隨在本網站/應用程式的資料、評論和購買或出售評分執行的交易負責。

AASTOCKS.com Limited之信息服務基於「現況」及「現有」的基礎提供,網站/應用程式的信息和內容如有更改恕不另行通知。AASTOCKS.com Limited有權但無此義務,改善或更正在本網站/應用程式的任何部分之錯誤或疏漏。

用戶在沒有AASTOCKS.com Limited明確的書面同意情況下,不得以任何方式複製、傳播、出售、出版、廣播、公佈、傳遞資訊內容或者利用在本網站/應用程式的信息和內容作商業用途。

投資涉及風險。 閣下可自行决定利用本網站的財金教學作學術參考用途,但 AASTOCKS.com Limited不能並不會保證任何在本網站/應用程式現在或未來的購買或出售評論和訊息會否帶來贏利。過往之表現不一定反映未來之表現,AASTOCKS.com Limited不可能作出該保證及用戶不應該作出該假設。

AASTOCKS.com Limited也許連結訂戶或訪客至其有興趣的網站,但AASTOCKS.com Limited只提供此服務給訂戶或訪客並不為此安排負責。

AASTOCKS.com Limited對於任何包含於、經由、連結、下載或從任何與本網站/應用程式有關服務所獲得之資訊、內容或廣告,不聲明或保證其內容之正確性或可靠性。 對於閣下透過本網站/應用程式上之廣告、資訊或要約而展示、購買或取得之任何產品、資訊資料,本公司亦不負品質保證之責任。

AATV是AASTOCKS.com Limited旗下的視頻網站平台。

閣下確認:(i) AATV只為提供資訊,並不為了任何交易目的;(ii) AATV節目內容以及其提供的資料並不構成任何AASTOCKS為售賣任何證券作出招攬、提出要約、意見或推薦,或對任何證劵或投資的收益或是否合適提供法律、稅務、會計、或投資意見或服務;及(iii)AATV並非為任何人士或法律實體在其他司法管轄區或國家使用,而在當地可能因該使用或分發而違反當地法律或法規。

AATV中節目內容中的個人意見和觀點僅供參考及討論,亦並不代表AASTOCKS.com Limited的立場。投資者必須按其本身投資目標及財務狀況自行作出投資決定。AASTOCKS.com Limited不對以下任何情況對閣下或任何人直接或間接負責:(i)AATV的不准確性,錯誤或遺漏,包括但不限於報價和財務數據; (ii)AATV中節目傳輸的延遲,錯誤或中斷; (iii)閣下由AATV中節目內容招致任何損失。

我們保留權利不時更改本免責聲明並於本網站/應用程式刊登更新版本。閣下必須定期查閱於本網站/應用程式刊登的資訊,以確保您即時知悉任何有關的改動。 如閣下於本免責聲明更新後仍繼續使用本網站/應用程式,即代表閣下同意接受更改後的本免責聲明的約束。

本免責聲明應受中華人民共和國香港特別行政區(「香港」)法律管限。閣下同意接受香港法院的專屬司法管轄權管轄。

本免責聲明的中英原文如有任何岐異,一切以英文原文為準。

更新日期為: 2023年1月6日