《電子技術應用》
您所在的位置:首頁 > 電子元件 > 業界動態 > 天數智芯首款通用GPU推理產品驚艷亮相

天數智芯首款通用GPU推理產品驚艷亮相

2022-12-22
來源:集微網
關鍵詞: 天數智芯 GPU 智鎧100

  集微網消息,從Midjourney、Stable Diffusion等AIGC(人工智能生成內容)小工具引爆流行,到對ChatGPT是否已能通過圖靈測試的廣泛討論,2022,無疑是人工智能發展史上又一個“大年”。接二連三的“全民級”事件傳播,強烈預示著人工智能產業發展的新階段業已拉開序幕,而廣闊的產業前景與動蕩的供應環境,也呼喚著本土廠商在通用人工智能(AGI)所依賴的訓練推理硬件上大有作為。

  12月20日,上海天數智芯半導體有限公司正式發布其通用GPU推理產品-智鎧100,繼天數智芯2021年發布首代通用GPU云端訓練產品天垓100并實現規模應用后,這家中國本土通用GPU產業“先行者”再次用產品驚艷業界。

  微信圖片_20221222093831.jpg

  云邊協同正當時

  在當天的致辭中,天數智芯總裁蓋魯江表示,智鎧100是繼天垓100后天數智芯正式向市場推出的第二款產品,標志著天數智芯成為國內唯一擁有云邊協同、訓推組合的完整通用算力系統全方案提供商。這是天數智芯繼往開來、奮勇前進的新起點,也是天數智芯發展中極為關鍵的一大步,還是天數智芯發展歷史上又一座里程碑。

  蓋魯江所強調的“云邊協同、訓推組合”,的確是當前通用GPU發展演進的主旋律。以時下引發全球社交平臺“狂熱”追捧,驚為天人的ChatGPT為例,就是“云邊協同、訓推組合”的一個經典案例。

  顧名思義,ChatGPT的基礎是GPT-3這一超大規模預訓練模型,在應用于生成式對話這一場景時,則使用少量人工標準的數據樣本進行模型的精調,參數規模下降了一兩個數量級,輕量化意味著大幅減少的資源開銷,也代表模型迭代效率可以大幅提升。

  在ChatGPT等AIGC“殺手應用”的示范效應下,可以想見,人工智能產業在傳統基于有監督學習的商業模式之外,無標簽大規模預訓練模型生成+邊側/端側小數據模型精調部署的云邊協同模式也將蔚然成風。

  伴隨著產業趨勢的深刻變革,通用GPU這一提供基礎算力的產品形態必然需要形成云端訓練和邊/端側推理的合理搭配,將進一步加速已經明顯形成的訓練、推理產品技術規格分化,云端訓練需要超大算力以承載動輒千億乃至萬億參數規模的大模型,而邊/端側推理則需要適應功耗、時延在應用現場的嚴苛約束,幫助預訓練大模型“蒸餾”之后的“小模型”實現場景可用與實際部署。

  從這一意義上看,高端通用GPU解決方案,必須實現訓練、推理產品“兩條腿走路”,而智鎧100,則標志著天數智芯向前邁出的又一開創性步伐。

  根據蓋魯江的介紹,智鎧100這款推理產品兼具“應用覆蓋廣,計算性能高,使用成本低”三大特質,可以廣泛應用于金融、醫療、教育、安防、互聯網、智能語音、車路協同智能中心等領域。智鎧100的上述主打特色及目標應用領域,可謂精準把握到了邊側/端側人工智能應用的痛點并給出了富有誠意的解決方案,有望繼天垓100之后,打造又一個經得起市場檢驗的“中國芯”標桿產品。

  值得一提的是,德高望重的倪光南院士,也專門為智鎧100的發布送上祝福,充分肯定了天數智芯成立數年來的不凡成績,并鼓勵團隊勇毅前行,為我國通用GPU事業的發展做出更大的貢獻。

  三大特質顯功力

  本次產品發布會上,天數智芯產品線總裁鄒翾對智鎧100的三大特質進行了詳細解讀。

  其一是計算性能高。智鎧100芯片支持FP32、FP16、INT8等多精度混合計算,實現了指令集增強、算力密度提升、計算存儲再平衡,支持多種視頻規格解碼。此次發布會推出的智鎧100產品卡,可提供最高384TOPS@int8、96TFlops@FP16、24TFlops@FP32的峰值算力,800GB/s的理論峰值帶寬以及128路并發的多種視頻規格解碼能力。相較于市場上現有主流產品,智鎧100將提供2-3倍的實際使用性能。

  其二是應用覆蓋廣。基于天數智芯第二代通用GPU架構,智鎧100多達800余條通用指令集,支持國內外主流深度學習開發框架,擁有豐富編程接口拓展和高性能函數庫,可以靈活支持各種算法模型,便于客戶自定義開發。智鎧100廣泛適用于智慧城市、智慧港口、智慧交通、智能制造、電力、智能語音、醫療、教育、智慧金融等眾多場景,為各行業提供堅實算力保障。

  其三是使用成本低。延續天垓100開發易遷移的特點,智鎧100全面支持推理及訓練一體化方案,能夠在不額外增加購置成本的情況下完成增量訓練工作,有效減少用戶的成本支出。延續天垓100的生態兼容策略,智鎧100仍提供開箱即用的產品體驗,降低用戶的開發成本和使用成本。

  鄒翾談到,智鎧100芯片是天數通用GPU架構的第二代產品,也是天垓100之后的新一代迭代,其產品特質,正是基于天垓100商用過程中來自行業一線的客戶需求:“我們的客戶期望能夠有一款產品針對推理應用進行端到端的進一步性能優化,得到性能提升。并且希望這些產品可以快速地支持最近流行的各種各樣的網紅應用,包含最近大家熟知的AI繪圖以及ChatGPT,同時客戶們也希望這樣的產品能夠針對這些應用提供更好的性價比。”

  在鄒翾講解過程中,對客戶案例的信手拈來為集微網留下了深刻印象,例如他引用合作伙伴在疾病AI輔助診斷領域的工作,一次完整的下消化道檢查涉及病變檢測、部位識別以及病變診斷3種業務的并發或順序重組,需要支持5個以上的模型而且還在變化中。智鎧100憑借其強大的算力,可以在只引入1-2ms延遲的情況下完成單卡上多數據流并行分發,滿足實時性要求,以支持在線手術,并且有條件對接高達90路攝像頭,通過圖像批處理完成多臺手術的并行工作。

  這一案例,也極為清晰地展示了為何時延在邊側/端側推理應用中如此重要,人命關天的醫療現場,人工智能應用的滲透往往存在“兩難”,或是高性能神經網絡模型缺少端側計算、存儲資源支撐無法部署,或是依賴于云端模型,存在極高的端到端時延,同樣難以實際應用。

  對行業、領域案例的熟悉,背后折射的是天數智芯作為一家商業公司的“章法”和“檔次”,以客戶成功為導向,以用戶體驗為準繩,使其與不少依然沉迷于標榜參數高低的“做題式”通用GPU玩家形成了巨大差異。

  做難事必有所得

  對人工智能領域稍有涉獵的觀察者都不難了解,英偉達等海外巨頭不僅在通用GPU產品上占據優勢地位,其在人工智能模型開發框架和軟件工具鏈上的優勢甚至更為驚人,以至于英偉達CUDA已成為事實上的行業基準。

  也正因為如此,通用GPU等“大芯片”的流片乃至量產,只是實現商業成功的“第一步”,更艱巨的考驗,在于開拓和培育用戶生態,倪光南院士在致辭中也談到,“國內通用GPU芯片以及支撐它的通用的并行計算架構,也就是CUDA架構,已經成為一個事實標準。在這個領域的市場上和CUDA兼容就是一種迫切的需求,這對于很多廠商都是一個重大的挑戰。”

  回顧過往歷史,不少高調發布乃至少量流片的本土高端芯片產品,往往在量產良率這一關口前就已悄然止步,遑論后續九十九難的商業化之路,而天數智芯,毫無疑問是在這一領域本土廠商中篳路藍縷的“拓荒者”和先行者。

  天數智芯能夠在靠產品力說話的通用GPU市場贏得一席之地,離不開其從基礎硬件到客戶現場服務、軟件工具鏈配套的全方位交付能力。今年8月,天數智芯還發布國內領先的通用計算及人工智能開源平臺DeepSpark,率先向行業開放技術能力。

  這樣的投入,特別是軟件團隊搭建和項目管理,往往對芯片企業而言是極大的挑戰,天數智芯選擇做難而正確的事情,離不開其公司資源圍繞“服務客戶”的極致聚焦。

  鄒翾講解中談到,“一款好的產品,除了良好的性價比通用性外,客戶的使用體驗也至關重要。”

  智鎧100延續天垓100的生態兼容策略,為客戶提供開箱即用的產品體驗,對客戶側不同職能使用者需求有深刻洞察,竭盡所能降低其遷移底層硬件的“成本”,盡可能維持其原有使用習慣,在這一基礎上,再通過產品特性創新,提供“one more thing”式的亮點,如MidJourney等AIGC網紅應用已經成為吸取流量的利器,不少互聯網客戶表達了試圖模仿其擴散模型(Diffusion model)實現類似功能的需求,天數智芯團隊僅用兩周就配合客戶完成了Diffusion模型的適配與調優工作,實現了應用的快速上線,充分顯示出智鎧100支持未知應用快速迭代的能力。

  如果說天垓100代表著天數智芯在通用GPU領域從0到1的突破,那么智鎧100的發布,則令人欣喜地看到,天數智芯從1到100的發展之路上已經走出了一串清晰而扎實的足跡。

  結語

  接連不斷的網紅應用,使今年儼然可以被視為“AIGC元年”乃至“AGI元年”,至少諸多有識之士,已經在非常嚴肅地思索MidJourney、ChatGPT等AI工具與相關領域專業內容生產者之間如何協作,并預卜未來無法有效與AI寫作的創意工作者,將面臨被淘汰的切實風險。

  這一撲面而來的人工智能產業新浪潮,也將為通用GPU市場帶來深刻而巨大的影響,智鎧100的發布,標志著來自中國的力量,也不會在這個巨大的機遇窗口缺席。

更多信息可以來這里獲取==>>電子技術應用-AET<<

微信圖片_20210517164139.jpg

本站內容除特別聲明的原創文章之外,轉載內容只為傳遞更多信息,并不代表本網站贊同其觀點。轉載的所有的文章、圖片、音/視頻文件等資料的版權歸版權所有權人所有。本站采用的非本站原創文章及圖片等內容無法一一聯系確認版權者。如涉及作品內容、版權和其它問題,請及時通過電子郵件或電話通知我們,以便迅速采取適當措施,避免給雙方造成不必要的經濟損失。聯系電話:010-82306118;郵箱:aet@chinaaet.com。
亚洲一区二区欧美_亚洲丝袜一区_99re亚洲国产精品_日韩亚洲一区二区
欧美激情一区在线观看| 国产精品乱码久久久久久| 亚洲一区二区欧美日韩| 91久久在线播放| 欧美一区二区啪啪| 亚洲一区在线播放| 99视频一区二区| 亚洲人成人99网站| 在线观看不卡| 在线成人中文字幕| 黄色在线成人| 极品日韩av| 精品91在线| 激情久久中文字幕| 黄色成人在线免费| 在线欧美一区| 亚洲国语精品自产拍在线观看| 在线免费观看日本欧美| 一区二区三区不卡视频在线观看| 欧美一区二区在线看| 亚洲最黄网站| 一区二区三区高清在线观看| 亚洲美女91| 亚洲精品在线一区二区| 亚洲精选中文字幕| 夜夜精品视频一区二区| 一卡二卡3卡四卡高清精品视频 | 激情丁香综合| 一区在线视频| 亚洲黄网站黄| 在线亚洲免费| 亚洲欧美日韩另类精品一区二区三区| 亚洲欧美日韩在线高清直播| 欧美一区二区三区在| 亚洲激情在线播放| av不卡免费看| 亚洲欧美三级在线| 久久免费国产精品1| 欧美成人精品影院| 欧美日韩成人在线观看| 欧美手机在线| 国产一区二区欧美日韩| 亚洲高清视频一区二区| 亚洲免费观看在线观看| 亚洲欧美日韩电影| 亚洲青涩在线| 亚洲一区二区免费| 久久久7777| 欧美人妖另类| 国产精品午夜久久| 在线视频成人| 亚洲调教视频在线观看| 欧美一区久久| 一本一本大道香蕉久在线精品| 性欧美办公室18xxxxhd| 欧美va亚洲va日韩∨a综合色| 欧美日韩性视频在线| 国产日韩精品一区| 亚洲国产小视频在线观看| 亚洲性感美女99在线| 久久精品亚洲一区二区| 亚洲视频在线观看视频| 久久精品中文字幕一区二区三区 | 日韩一区二区精品在线观看| 欧美一区二区三区的| 亚洲美女区一区| 欧美亚洲综合在线| 欧美韩国一区| 国产字幕视频一区二区| 夜夜嗨av一区二区三区| 亚洲福利视频一区| 亚洲欧美日韩专区| 欧美精品v日韩精品v国产精品 | 99re66热这里只有精品4| 久久超碰97中文字幕| 欧美日韩国产小视频| 国产综合香蕉五月婷在线| 亚洲伦理在线| 亚洲国产91精品在线观看| 亚洲欧美色婷婷| 欧美另类女人| 精久久久久久| 亚洲在线观看视频| 99精品免费视频| 狂野欧美激情性xxxx欧美| 欧美性猛交一区二区三区精品| 在线观看成人av电影| 新67194成人永久网站| 在线一区免费观看| 欧美 日韩 国产 一区| 国产日本欧美在线观看| 艳妇臀荡乳欲伦亚洲一区| 亚洲人精品午夜在线观看| 久久久91精品国产一区二区三区 | 国产精品乱码一区二三区小蝌蚪| 亚洲国产老妈| 亚洲电影专区| 久久精品国产免费观看| 国产精品久久激情| 99精品国产福利在线观看免费| 亚洲欧洲在线播放| 久久伊伊香蕉| 国产视频一区欧美| 亚洲影院免费| 亚洲综合视频1区| 欧美色视频一区| 99re66热这里只有精品4| 日韩午夜av| 欧美精品日日鲁夜夜添| 亚洲国产精品一区在线观看不卡| 久久精品免费看| 久久久久久穴| 国产亚洲欧美另类中文| 亚洲欧美日韩成人| 性欧美超级视频| 国产精品欧美精品| 亚洲一区制服诱惑| 先锋影音国产一区| 国产精品裸体一区二区三区| 在线视频你懂得一区二区三区| 一本色道久久88综合亚洲精品ⅰ | 亚洲精品一区在线观看香蕉| 蜜臀久久99精品久久久久久9 | 最近中文字幕日韩精品| 免费成年人欧美视频| 尤物九九久久国产精品的分类| 亚洲第一在线视频| 免费亚洲电影在线| 91久久精品国产91性色| 日韩一二三在线视频播| 欧美日韩一区视频| 亚洲婷婷国产精品电影人久久| 亚洲欧美日韩精品久久亚洲区| 国产精品美女久久久久久2018 | 香蕉久久夜色精品国产| 久久九九免费视频| 黄色成人小视频| 亚洲精品一二| 欧美日本国产一区| 亚洲最新视频在线播放| 欧美亚洲免费电影| 国产综合av| 亚洲精选大片| 欧美色中文字幕| 亚洲综合精品四区| 久久久精品国产免费观看同学| 激情伊人五月天久久综合| 亚洲日本va午夜在线影院| 欧美另类69精品久久久久9999| 一本色道**综合亚洲精品蜜桃冫| 亚洲欧美综合国产精品一区| 国产视频久久久久| 亚洲欧洲在线看| 国产精品成人一区二区三区吃奶| 亚洲一区二区三区中文字幕在线| 久久久国产精品亚洲一区| 亚洲二区视频| 亚洲影视在线播放| 国产真实久久| 一区二区三区高清在线| 国产精品影院在线观看| 亚洲国产高潮在线观看| 欧美日韩第一区日日骚| 亚洲欧美日韩系列| 欧美sm极限捆绑bd| 中文国产一区| 久久中文字幕导航| av不卡在线| 欧美一级大片在线观看| 亚洲国产91| 午夜视频久久久| 在线观看不卡av| 亚洲制服av| 亚洲国产99| 欧美一区二区三区四区在线观看| 亚洲国产精品成人一区二区 | 国产欧美日本一区二区三区| 亚洲国产精品va| 欧美亚洲成人网| 亚洲国产成人高清精品| 国产精品久久九九| 亚洲欧洲美洲综合色网| 国产精品青草综合久久久久99| 亚洲国产国产亚洲一二三| 欧美亚洲第一页| 亚洲精品久久久久久久久久久久| 国产精品一香蕉国产线看观看| 日韩视频在线永久播放| 国产一区二区毛片| 亚洲尤物影院| 亚洲国产精品免费| 久久精品夜色噜噜亚洲aⅴ| 日韩一级大片在线| 免费欧美在线| 午夜精品久久久久久久男人的天堂 | 久久精品国产清高在天天线| 欧美日韩日本网| 最新成人av在线| 国产人成一区二区三区影院| 亚洲少妇中出一区|