《電子技術應用》
您所在的位置:首頁 > 嵌入式技術 > 解決方案 > 打造 “CPU+” 異構計算平臺,Arm 靈活應對各類 AI 工作負載

打造 “CPU+” 異構計算平臺,Arm 靈活應對各類 AI 工作負載

2024-12-31
來源:Arm
關鍵詞: ARM AI CPU

  對于人工智能 (AI) 而言,任何單一硬件或計算組件都無法成為適合各類工作負載的萬能解決方案。AI 貫穿從云端到邊緣側的整個現代計算領域,為了滿足不同的 AI 用例和需求,一個可以靈活使用 CPU、GPU 和 NPU 等不同計算引擎的異構計算平臺必不可少。

  依托于 Arm CPU 的性能、能效、普及性、易于編程性和靈活性,從小型的嵌入式設備到大型的數據中心,Arm CPU 已經為各種平臺上的 AI 加速奠定了基礎。

  就靈活性而言,這對生態系統大有裨益的三個主要原因是,首先,Arm CPU 可以處理廣泛的 AI 推理用例,其中許多用例通常用于數十億臺設備,例如當今的智能手機、云和數據中心。不僅如此,除了推理之外,CPU 還經常用于技術棧中的數據預處理和編排等其他任務。其次,開發者能夠在更多種類的數據格式中運行更廣泛的軟件,而無需構建多個版本的代碼。最后,CPU 的靈活性使之成為加速 AI 工作負載的理想工具。

  提供多樣性和選擇,助力行業靈活部署 AI 計算

  除了 CPU 產品組合外,Arm 計算平臺還包括 GPU 和 NPU 等 AI 加速器技術,許多市場都在將這些技術與 CPU 進行集成。

  在移動端領域,Arm 終端計算子系統 (CSS) 包含 Armv9.2 CPU 集群,并與 Arm Immortalis-G925 GPU 集成,可為各種 AI 用例提供加速功能,包括圖像分割、對象檢測、自然語言處理和語音轉文本等用例。在物聯網 (IoT) 方面,Arm Ethos-U85 NPU 可與需要加速 AI 性能的基于 Arm Cortex-A 的系統一起設計,例如工廠自動化等場景。

  此外,除了 Arm 自己的加速器技術外,合作伙伴借助 Arm 的 CPU 靈活定制具有差異化的芯片解決方案。例如,NVIDIA 用于 AI 基礎設施的 Grace Blackwell 和 Grace Hopper 超級芯片均采用了 Arm CPU 和 NVIDIA 的 AI 加速器技術,從而顯著提升 AI 性能。

  NVIDIA Grace Blackwell 超級芯片將 NVIDIA 的 Blackwell GPU 架構與基于 Arm Neoverse 的 Grace CPU 相結合。Arm 獨特的產品組合使 NVIDIA 能夠進行系統級設計優化,與 NVIDIA H100 GPU 相比,其能耗降低了 25 倍,單個 GPU 性能提高了 30 倍。具體來說,得益于 Arm Neoverse 平臺的靈活性,NVIDIA 能夠實現自有的高帶寬 NVLink 互連技術,并提升 CPU、GPU 和內存之間的數據帶寬和延遲。

  Arm 致力于通過 Arm 全面設計生態項目,為整個生態系統注入 AI 加速的機遇。通過該生態項目,開發者可以更快訪問 Arm CSS 技術,賦能軟硬件技術進步,以此驅動 AI 和芯片創新,并加快開發和部署 AI 優化的芯片解決方案。

  Arm 架構滿足 AI 所需的獨特靈活性

  Arm CPU 設計所具有靈活性關鍵在于 Arm 領先的架構。它提供了一個可以與 AI 加速器技術緊密集成的基礎平臺,并支持從 128 位到 2,048 位的各種向量長度,可以在許多不同的數據點上輕松執行多個神經網絡。

  Arm 架構的靈活性為整個芯片生態系統提供了多樣化的定制機會,Arm 一直致力于幫助合作伙伴更快地構建自己的差異化芯片解決方案。這種獨特的靈活性也使 Arm 能夠不斷進行架構創新,定期推出關鍵指令和功能來加速 AI 計算,進而惠及整個生態系統,其中包括領先的芯片合作伙伴,以及在 Arm 計算平臺上構建應用的 2,000 多萬軟件開發者等。

  這一切始于 Armv7 架構,該架構引入了高級單指令多數據 (SIMD) 擴展,例如 Neon 技術,這是 Arm 首次涉足機器學習 (ML) 工作負載。在過去幾年中,該架構不斷增強,Armv8 中增加了向量點積和矩陣乘法特性,之后在 Armv9 中又引入了 Arm SVE2 和新的 Arm SME 技術 ,為廣泛的生成式 AI 工作負載和用例提高了計算性能并降低了功耗。

  與 AI 加速器技術無縫集成

  Arm 是 AI 時代的計算平臺,推動了持續的架構創新,以滿足速度更快、互動性更好和沉浸感更強的 AI 應用的發展。Arm CPU 作為靈活處理 AI 工作負載的異構計算方法中的一部分,可以無縫增強和集成 GPU 和 NPU 等 AI 加速器技術。

  Arm CPU 是處理眾多 AI 推理工作負載的實用之選,憑借出色的靈活性,它能夠與加速器技術無縫集成,打造更強大、更高性能的 AI 功能,精準滿足特定用例和計算需求。對于 Arm 的技術合作伙伴而言,出色的靈活性有助于實現豐富的定制選擇,使他們能夠為 AI 工作負載構建完整的芯片解決方案。




更多精彩內容歡迎點擊==>>電子技術應用-AET<<

3952966954c9c6c308355d1d28d750b.jpg

本站內容除特別聲明的原創文章之外,轉載內容只為傳遞更多信息,并不代表本網站贊同其觀點。轉載的所有的文章、圖片、音/視頻文件等資料的版權歸版權所有權人所有。本站采用的非本站原創文章及圖片等內容無法一一聯系確認版權者。如涉及作品內容、版權和其它問題,請及時通過電子郵件或電話通知我們,以便迅速采取適當措施,避免給雙方造成不必要的經濟損失。聯系電話:010-82306118;郵箱:aet@chinaaet.com。
主站蜘蛛池模板: 嫩b人妻精品一区二区三区| 日韩精品亚洲人成在线观看| 午夜寂寞在线一级观看免费| 久久国内精品自在自线400部o| 欧美最猛性xxxxx69交| 人妻少妇乱子伦精品| 黄网站免费在线观看| 国产精品午夜爆乳美女| 中文字幕一区二区三区乱码| 日韩人妻无码精品专区| 亚洲av永久无码精品水牛影视| 精品国产不卡一区二区三区| 国产福利一区视频| 一级视频免费观看| 日本3p视频在线看高清| 亚洲日韩中文字幕天堂不卡 | 亚洲在成人网在线看| 玉蒲团之天下第一| 免费超爽大片黄| 精品日本一区二区三区在线观看| 国产白嫩美女在线观看| 一个人看的日本www| 成人精品一区二区激情| 久久中文字幕免费视频| 欧美孕妇xxxx做受欧美| 亚洲理论片在线观看| 狠狠久久精品中文字幕无码 | 国产成人精品永久免费视频| www.爱情岛论坛| 慧静和一群狼好爽| 中文字幕一区日韩在线视频| 无码人妻精一区二区三区| 久久久久国产精品免费免费搜索 | 初女破苞国语在线观看免费| 好吊色在线观看| 国产真实迷j在线播放| 老司机精品视频在线| 国产精品二区高清在线| jizzjizz成熟丰满舒服| 日日摸日日碰夜夜爽亚洲| 久久亚洲高清观看|