在11月8日在京舉行的第七屆中國超級算力大會(ChinaSC 2025)上,由中國科學(xué)院計算技術(shù)研究所研究員張云泉、清華大學(xué)教授陳文光、美國阿貢國家實驗室Pavan Balaji研究員和瑞士蘇黎世實驗室Torsten Hoefler教授共同發(fā)起的世界人工智能算力性能排行榜——AIPerf500發(fā)布。
榜單發(fā)布人、清華大學(xué)計算機(jī)系長聘教授翟季冬介紹說,AIPerf是面向智能算力評估的國際性排行榜,其于2020年首次在中國超級算力大會上發(fā)布榜單。相比傳統(tǒng)超算性能排行榜,AIPerf榜單是對智能算力評測領(lǐng)域的有效補(bǔ)充。
翟季冬發(fā)布AIPerf榜單。圖源:ChinaSC 2025,下同
“中國的智算、超算等算力發(fā)展非常迅速,許多省市都建設(shè)了智算中心。”翟季冬說,對于公眾而言,人們需要一個簡單明晰的指標(biāo)來了解“哪個智算中心的算力更強(qiáng)”“智算中心的算力到底如何”等問題,AIPerf就是在此背景下誕生的。
今年的AIPerf延續(xù)了2024年的做法,包含三部分:采用經(jīng)典卷積模型評價智能算力訓(xùn)練性能的AIPerf、以大語言模型訓(xùn)練效果評價智能算力性能的AIPerf-LLM、以大模型推理效能評價智能算力性能的AIPerf-Inference。
據(jù)介紹,AIPerf測試程序具有“提供一個分?jǐn)?shù)”“可變計算規(guī)模”“計算有人工智能意義”“多機(jī)通信可以少但不能沒有”等特點,其得分結(jié)果對于可測評系統(tǒng)的訓(xùn)練性能有直觀反映。
在今年的排行榜上,北京超級云計算中心提交的兩臺新機(jī)器榜上有名,分別位列該榜單第一、第三位。作為,位于榜首的“新面孔”,北京超級云計算中心以NVIDIA RTX5090打造的系統(tǒng),共有1194個節(jié)點,總卡數(shù)近萬張;此前的榜首、由鵬城實驗室與華為公司聯(lián)合打造的AI計算系統(tǒng)——“鵬城云腦II”屈居次席。
基于AIPerf-LLM,翟季冬發(fā)布了以“大模型訓(xùn)練能力”作為區(qū)分的算力排行榜。在可測的若干智能計算系統(tǒng)中,北京超級云計算中心、阿里云部署在復(fù)旦大學(xué)的智算集群等位列前茅。
AIPerf-Inference有兩個榜單,分別為“吞吐榜”和“延遲榜”,以適應(yīng)不同推理任務(wù)的不同特征需要。其中,在“吞吐榜”上,北京超級云計算中心2臺智算系統(tǒng)、新疆?dāng)?shù)算電科技技術(shù)有限責(zé)任公司和北京清程極智科技有限公司共同開發(fā)的系統(tǒng)位列榜單 Top3。
張云泉和翟季冬為上榜單位(部分)頒發(fā)證書。
“隨著AI的發(fā)展,我們計劃增加一個以大模型Tokens調(diào)用性能為評測基準(zhǔn)的榜單AIPing (aiping.cn),評測不同MaaS平臺的服務(wù)性能。現(xiàn)在還在籌劃階段,希望征求一下同行領(lǐng)域?qū)<业慕ㄗh。”翟季冬說,目前團(tuán)隊已經(jīng)在這方面做了一些準(zhǔn)備和測試工作,“今年只是拋一個磚,未來希望有更多的MaaS(模型作為服務(wù))平臺開展性能測試”。
本文鏈接:測試智算性能!新一期國際排行榜AIPerf發(fā)布http://www.sq15.cn/show-11-27994-0.html
聲明:本網(wǎng)站為非營利性網(wǎng)站,本網(wǎng)頁內(nèi)容由互聯(lián)網(wǎng)博主自發(fā)貢獻(xiàn),不代表本站觀點,本站不承擔(dān)任何法律責(zé)任。天上不會到餡餅,請大家謹(jǐn)防詐騙!若有侵權(quán)等問題請及時與本網(wǎng)聯(lián)系,我們將在第一時間刪除處理。
上一篇: 第九屆中國濕地論壇在長沙舉行