國產(chǎn)GPU鼎力支持!摩爾線程快速部署DeepSeek
DeepSeek V3、R1系列開源AI大模型在多語言理解、復(fù)雜推理任務(wù)中展現(xiàn)了卓越性能,不僅推動了AI技術(shù)的普及與發(fā)展,更是對開源社區(qū)的極大貢獻。
2025-02-05 09:39:56
來源:快科技??

快科技2月4日消息,DeepSeek V3、R1系列開源AI大模型在多語言理解、復(fù)雜推理任務(wù)中展現(xiàn)了卓越性能,不僅推動了AI技術(shù)的普及與發(fā)展,更是對開源社區(qū)的極大貢獻。

目前,各家科技巨頭都已紛紛開始支持、部署DeepSeek,國產(chǎn)硬件也在加速支持。

作為國產(chǎn)全功能GPU創(chuàng)新企業(yè),摩爾線程快速實現(xiàn)了對DeepSeek蒸餾模型推理服務(wù)的高效部署,可讓更多開發(fā)者基于摩爾線程全功能GPU,進行AI應(yīng)用創(chuàng)新。

一鍵體驗地址:

https://playground.mthreads.com

此外,用戶也可以基于摩爾線程MTT S80、MTT S4000顯卡,進行DeepSeek-R1蒸餾模型的推理部署。

其實早在1月28日,就已經(jīng)有B站UP主在摩爾線程MTT S80上手動完成實踐:

https://www.bilibili.com/video/BV18YfQYEEs2

通過DeepSeek提供的蒸餾模型,能夠?qū)⒋笠?guī)模模型的能力遷移至更小、更高效的版本,在國產(chǎn)GPU上實現(xiàn)高性能推理。

摩爾線程基于自研全功能GPU,通過開源與自研雙引擎方案,快速實現(xiàn)了對DeepSeek蒸餾模型的推理服務(wù)部署。

開源框架適配:

基于Ollama開源框架,摩爾線程完成DeepSeek-R1-Distill-Qwen-7B蒸餾模型的部署,并在多種中文任務(wù)中展現(xiàn)了優(yōu)異的性能,驗證摩爾線程自研全功能GPU的通用性與CUDA兼容性。

自研引擎加速:

通過摩爾線程自主研發(fā)的高性能推理引擎,結(jié)合軟硬件協(xié)同優(yōu)化技術(shù),通過定制化的算子加速和內(nèi)存管理,顯著提升了模型的計算效率和資源利用率。

這一引擎不僅支持DeepSeek蒸餾模型的高效運行,還為未來更多大規(guī)模模型的部署提供了技術(shù)保障。 

最后,摩爾線程即將開放自主設(shè)計的夸娥(KUAE)GPU智算集群,全面支持DeepSeek V3、R1模型,以及新一代蒸餾模型的分布式部署。

夸娥集群集成先進推理技術(shù)與分布式計算框架,將確保大規(guī)模模型的高效穩(wěn)定運行,助力開發(fā)者快速實現(xiàn)業(yè)務(wù)落地。

最新文章
1
4年前理想李想和特斯拉陶琳說的話,值得所有人深思
2
TCL上新Mini LED電視,T7L為何“最能打”,Q9L為何“最值得買”?
3
八年前用A9帶火屏幕發(fā)聲技術(shù)的索尼,今年會有OLED新品嗎?
4
海信視像發(fā)布2024年可持續(xù)發(fā)展報告:以綠色科技推動可持續(xù)發(fā)展
5
都叫“養(yǎng)鮮”冰箱,格力、容聲有啥不一樣?
6
財報觀察:2024全球智能家電銷量第一品牌,講好新故事?
7
續(xù)航滅霸 +倍強大 vivo Y300 Pro+正式發(fā)布
8
BOE(京東方)f-OLED柔性顯示技術(shù)策源地論壇舉辦 攜手中關(guān)村論壇共筑科技創(chuàng)新高地
9
海信視像2024年營收凈利雙增,高端穩(wěn)步增長,蟬聯(lián)世界第二
10
精裝修熱水系統(tǒng)市場外資占優(yōu),高端住宅需求點燃新增長(2025年1-2月)
11
AI家電:技術(shù)狂歡還是實用革命?
12
中國半導(dǎo)體并購潮起
13
小家電市場表現(xiàn)低迷,2025年小家電市場面臨嚴(yán)峻挑戰(zhàn)
14
全球首款!新型手機OLED面板問世:可發(fā)聲、會變形
15
空調(diào)等家電沖擊傳統(tǒng)廠商!持股近10年 美的徹底清倉了小米:合計套現(xiàn)20億元
16
同期唯一2K直屏超大杯!OPPO Find X8 Ultra外觀正式揭曉
17
添可做飯,追覓洗碗
18
海爾海信洗衣機聽勸玩起“滾筒分身術(shù)”,三筒分區(qū)洗哪家強?
19
催更效果拉滿!高對比度屏+萬象分區(qū),TCL T7L&Q9L系列全球首發(fā)
20
健康守護+空間革命+智慧服務(wù),TCL冰洗創(chuàng)新“三重奏”擊中時代剛需
關(guān)于我們

微信掃一掃,加關(guān)注

商務(wù)合作
  • QQ:61149512