AMD在近日舉行的AMD Advancing AI 2025活動中,正式揭曉了其備受矚目的下一代開源軟件棧技術(shù)——ROCm 7。這一發(fā)布標(biāo)志著AMD在加速AI與提升開發(fā)者生產(chǎn)力方面邁出了重要一步。
ROCm 7的問世,是AMD繼ROCm 6之后的又一次重大更新。自AI計算興起以來,ROCm軟件棧經(jīng)歷了多次迭代與優(yōu)化。此次ROCm 7的發(fā)布,帶來了多項關(guān)鍵功能的增強(qiáng):
首先,ROCm 7引入了最新的算法與模型,為AI應(yīng)用提供了更為強(qiáng)大的計算基礎(chǔ)。其次,AMD在ROCm 7中加入了擴(kuò)展AI的高級功能,進(jìn)一步提升了軟件的靈活性和適用性。ROCm 7還首次支持了MI350系列,為這一系列的用戶提供了更為全面的軟件支持。集群管理和企業(yè)級功能的加入,也使得ROCm 7更加適合大規(guī)模部署和復(fù)雜應(yīng)用場景。
AMD在ROCm 7中特別強(qiáng)調(diào)了其軟件堆棧中日益增長的推理能力。為此,ROCm 7堆棧中包含了增強(qiáng)型框架,如vLLM v1、llm-d和SGLang等,這些框架旨在提供多種優(yōu)化,以滿足不同場景下的需求。ROCm 7還引入了新的內(nèi)核和算法,包括GEMM自動調(diào)優(yōu)、MoE、Attention以及基于Python的內(nèi)核編寫,這些新技術(shù)的加入將進(jìn)一步提升軟件的性能和靈活性。
在數(shù)據(jù)類型支持方面,ROCm 7也取得了顯著進(jìn)展。AMD宣布對其MI350系列提供FP6和FP4支持,同時ROCm 7也全面支持FP8、FP6、FP4和混合精度等高級數(shù)據(jù)類型。這些支持的加入,將使得ROCm 7在處理復(fù)雜AI任務(wù)時更加得心應(yīng)手。
從性能表現(xiàn)來看,ROCm 7同樣不負(fù)眾望。AMD表示,ROCm 7將推理作為重點(diǎn),為AI工作負(fù)載帶來了高達(dá)3.5倍的性能提升。具體來說,相較于ROCm 6,ROCm 7在Llama 3.1 70B上的性能提升了3.2倍,在Qwen2-72B上提升了3.4倍,在DeepSeek R1上更是實(shí)現(xiàn)了3.8倍的性能飛躍。
這些顯著的性能提升和新增功能,無疑將使得ROCm 7成為AI領(lǐng)域的一股強(qiáng)勁力量。對于開發(fā)者而言,ROCm 7的發(fā)布無疑將為他們提供更多的選擇和可能性,助力他們在AI領(lǐng)域取得更加輝煌的成就。