chinese直男口爆体育生外卖, 99久久er热在这里只有精品99, 又色又爽又黄18禁美女裸身无遮挡, gogogo高清免费观看日本电视,私密按摩师高清版在线,人妻视频毛茸茸,91论坛 兴趣闲谈,欧美 亚洲 精品 8区,国产精品久久久久精品免费

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫(xiě)文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

Arm CPU適配通義千問(wèn)Qwen3系列模型

Arm社區(qū) ? 來(lái)源:Arm社區(qū) ? 2025-05-12 16:37 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

近日,阿里巴巴開(kāi)源了新一代通義千問(wèn)模型 Qwen3,Arm 率先成為首批成功適配該模型的計(jì)算平臺(tái)廠商。與此同時(shí),Arm 面向人工智能 (AI) 框架開(kāi)發(fā)者的開(kāi)源計(jì)算內(nèi)核 Arm KleidiAI 與阿里巴巴開(kāi)源的輕量級(jí)深度學(xué)習(xí)框架 MNN 已深度集成。得益于此,Qwen3-0.6B、Qwen3-1.7B 及 Qwen3-4B 三款模型能夠在搭載 Arm 架構(gòu) CPU 的移動(dòng)設(shè)備上無(wú)縫運(yùn)行,為用戶(hù)提供卓越的端側(cè) AI 推理能力。

作為阿里巴巴最新開(kāi)源的混合推理模型,Qwen3 在 AIME、LiveCodeBench 等權(quán)威評(píng)測(cè)集上斬獲了同尺寸開(kāi)源模型 SOTA。其中,Qwen3-0.6B、Qwen3-1.7B、Qwen3-4B 等三款模型兼具低功耗和高性能等優(yōu)勢(shì),非常適合在移動(dòng)端進(jìn)行部署。

在 AI 模型快速迭代、日新月異的當(dāng)下,開(kāi)發(fā)者亟需一個(gè)具備可擴(kuò)展性的通用技術(shù)底座,以便高效利用每一個(gè)新模型的優(yōu)勢(shì)。作為業(yè)界性能最強(qiáng)、能效最高的計(jì)算平臺(tái),Arm 為開(kāi)發(fā)者提供了無(wú)縫優(yōu)化其 AI 工作負(fù)載所需的卓越性能、能效、靈活性和可擴(kuò)展性。Arm CPU 能滿(mǎn)足不斷發(fā)展的 AI 工作負(fù)載需求,是開(kāi)發(fā)者的理想之選,它不僅能在模型推出時(shí)迅速實(shí)現(xiàn)適配與支持,還能隨著模型的演進(jìn),通過(guò) Arm 異構(gòu)計(jì)算策略與 GPU、加速器及網(wǎng)絡(luò)技術(shù)的共生協(xié)作,實(shí)現(xiàn) AI 系統(tǒng)的最佳優(yōu)化。在此次阿里 Qwen3 模型推出后,運(yùn)行結(jié)果顯示,Qwen3-0.6B、Qwen3-1.7B 及 Qwen3-4B 三款模型在基于 Arm 架構(gòu) CPU 的移動(dòng)設(shè)備上,運(yùn)行和響應(yīng)速度大幅提升,為終端用戶(hù)帶來(lái)了極致的 AI 推理能力。

雙方圍繞千問(wèn)大模型持續(xù)緊密合作,今年三月,Arm 與阿里巴巴淘天集團(tuán)在搭載基于 Arm Cortex-X925 的旗艦移動(dòng)系統(tǒng)級(jí)芯片 (SoC) 的智能設(shè)備上,通過(guò) KleidiAI 與 MNN 的集成,模型預(yù)填充(指 AI 模型在生成響應(yīng)之前先對(duì)提示詞輸入進(jìn)行處理)性能提升了 57%,以及解碼(指處理提示詞后從 AI 模型生成文本的過(guò)程)性能提升了 28%。這一性能提升,使得運(yùn)行在搭載 Arm CPU 上的通義千問(wèn) Qwen2-VL-2B-Instruct,其端側(cè)多模態(tài) AI 工作負(fù)載的性能顯著增進(jìn),帶來(lái)全新的用戶(hù)體驗(yàn)!

展望未來(lái),Arm 也將一如既往助力開(kāi)發(fā)者在端側(cè)設(shè)備上提供更加復(fù)雜的多模態(tài)體驗(yàn),為新一輪智能計(jì)算浪潮奠定堅(jiān)實(shí)基礎(chǔ),在 AI 的不斷演進(jìn)中,實(shí)現(xiàn)體驗(yàn)的持續(xù)躍升!

聲明:本文內(nèi)容及配圖由入駐作者撰寫(xiě)或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • ARM
    ARM
    +關(guān)注

    關(guān)注

    134

    文章

    9353

    瀏覽量

    377649
  • cpu
    cpu
    +關(guān)注

    關(guān)注

    68

    文章

    11080

    瀏覽量

    217123
  • 阿里巴巴
    +關(guān)注

    關(guān)注

    7

    文章

    1638

    瀏覽量

    48245
  • 模型
    +關(guān)注

    關(guān)注

    1

    文章

    3521

    瀏覽量

    50439

原文標(biāo)題:Arm CPU 精準(zhǔn)適配阿里 Qwen3 開(kāi)源模型,實(shí)現(xiàn)卓越端側(cè) AI 推理能力

文章出處:【微信號(hào):Arm社區(qū),微信公眾號(hào):Arm社區(qū)】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    廣和通加速通義問(wèn)Qwen3在端側(cè)全面落地

    6月,廣和通宣布:率先完成通義問(wèn)Qwen3系列混合推理模型在高通QCS8550平臺(tái)端側(cè)的
    的頭像 發(fā)表于 06-25 15:35 ?333次閱讀

    壁仞科技完成Qwen3旗艦模型適配

    近日,在高效適配Qwen3系列模型推理后,壁仞科技宣布完成旗艦版Qwen3-235B-A22B模型
    的頭像 發(fā)表于 05-16 16:23 ?412次閱讀

    Intel OpenVINO? Day0 實(shí)現(xiàn)阿里通義 Qwen3 快速部署

    本文將以 Qwen3-8B 為例,介紹如何利用 OpenVINO 的 Python API 在英特爾平臺(tái)(GPU, NPU)Qwen3 系列模型
    的頭像 發(fā)表于 05-11 11:36 ?854次閱讀
    Intel OpenVINO? Day0 實(shí)現(xiàn)阿里<b class='flag-5'>通義</b> <b class='flag-5'>Qwen3</b> 快速部署

    NVIDIA RTX 5880 Ada與Qwen3系列模型實(shí)測(cè)報(bào)告

    近日,阿里巴巴通義問(wèn)團(tuán)隊(duì)正式推出新一代開(kāi)源大語(yǔ)言模型——Qwen3 系列,該
    的頭像 發(fā)表于 05-09 15:05 ?972次閱讀
    NVIDIA RTX 5880 Ada與<b class='flag-5'>Qwen3</b><b class='flag-5'>系列</b><b class='flag-5'>模型</b>實(shí)測(cè)報(bào)告

    NVIDIA使用Qwen3系列模型的最佳實(shí)踐

    阿里巴巴近期發(fā)布了其開(kāi)源的混合推理大語(yǔ)言模型 (LLM) 通義問(wèn) Qwen3,此次 Qwen3
    的頭像 發(fā)表于 05-08 11:45 ?1276次閱讀
    NVIDIA使用<b class='flag-5'>Qwen3</b><b class='flag-5'>系列</b><b class='flag-5'>模型</b>的最佳實(shí)踐

    MediaTek天璣9400率先完成阿里Qwen3模型部署

    通義模型團(tuán)隊(duì)在天璣 9400 旗艦移動(dòng)平臺(tái)上率先完成 Qwen3問(wèn) 3)的端側(cè)部署。未來(lái),
    的頭像 發(fā)表于 05-08 10:11 ?505次閱讀

    后摩智能NPU適配通義問(wèn)Qwen3系列模型

    近日,阿里云重磅推出Qwen3 系列開(kāi)源混合推理模型。用時(shí)不到1天,后摩智能自研NPU迅速實(shí)現(xiàn)Qwen3 系列
    的頭像 發(fā)表于 05-07 16:46 ?572次閱讀

    寒武紀(jì)率先支持Qwen3系列模型

    近日,阿里Qwen團(tuán)隊(duì)一口氣上新8大模型,Qwen3正式發(fā)布并全部開(kāi)源。
    的頭像 發(fā)表于 05-07 15:51 ?424次閱讀

    在openEuler上基于vLLM Ascend部署Qwen3

    近日,阿里巴巴正式發(fā)布新一代Qwen大語(yǔ)言模型系列Qwen3Qwen3-MoE),在模型規(guī)模
    的頭像 發(fā)表于 05-07 14:44 ?677次閱讀
    在openEuler上基于vLLM Ascend部署<b class='flag-5'>Qwen3</b>

    幾B都有!BM1684X一鍵適配系列Qwen3

    Qwen3發(fā)布,大小尺寸通吃Qwen3一發(fā)布,登頂開(kāi)源大模型排行榜!235B、32B、8B、4B、1.7B云邊端全尺寸模型,BF16和FP8兩種精度,一次性發(fā)布,無(wú)論云端大卡還是邊緣A
    的頭像 發(fā)表于 04-30 18:37 ?579次閱讀
    幾B都有!BM1684X一鍵<b class='flag-5'>適配</b>全<b class='flag-5'>系列</b><b class='flag-5'>Qwen3</b>

    上新:小米首個(gè)推理大模型開(kāi)源 馬斯克:下周推出Grok 3.5

    似乎國(guó)內(nèi)外AI競(jìng)爭(zhēng)日趨白熱化,就在阿里巴巴發(fā)布Qwen3通義問(wèn)3)之后,引發(fā)業(yè)界廣泛關(guān)注;很多大廠在跟進(jìn),大
    的頭像 發(fā)表于 04-30 16:08 ?798次閱讀

    壁仞科技完成阿里巴巴通義問(wèn)Qwen3系列模型支持

    4月29日,阿里巴巴通義問(wèn)發(fā)布并開(kāi)源8款新版Qwen3系列“混合推理模型”(簡(jiǎn)稱(chēng)“
    的頭像 發(fā)表于 04-30 15:19 ?772次閱讀

    阿里通義問(wèn)代碼模型系列開(kāi)源

    近日,阿里云通義模型團(tuán)隊(duì)宣布了一項(xiàng)重大決策:將通義問(wèn)代碼模型
    的頭像 發(fā)表于 11-14 15:26 ?1002次閱讀

    通義問(wèn)三款主力模型再降價(jià)

    阿里云百煉平臺(tái)再次掀起降價(jià)風(fēng)暴,三款通義問(wèn)主力模型——Qwen-Turbo、Qwen-Plus
    的頭像 發(fā)表于 09-20 16:46 ?1539次閱讀

    通義問(wèn)發(fā)布第二代視覺(jué)語(yǔ)言模型Qwen2-VL

    阿里巴巴旗下的通義問(wèn)近日宣布,其第二代視覺(jué)語(yǔ)言模型Qwen2-VL正式問(wèn)世,并宣布旗艦模型
    的頭像 發(fā)表于 09-03 16:31 ?861次閱讀