ChatGPT掀起的新一輪人工智能狂歡下,隱藏在背后的“大模型”正進入越來越多開發(fā)者的視野。
誠如幾年前開始流行的一種說法:數據是燃料、模型是引擎、算力是加速器。ChatGPT的出現,恰如其分地詮釋了數據、模型和算力的“化學反應”。而在其中扮演“橋梁”角色的,恰恰是上承應用、下接芯片的AI框架。
正是在這樣的背景下,市場調研機構Omdia通過對AI開發(fā)者進行調研,在日前發(fā)布了《中國人工智能框架市場調研報告》,向外界揭示了國內開發(fā)者對于AI框架的認知,以及不斷變化的行業(yè)格局。
01 開發(fā)者眼中的AI框架市場
隨著ChatGPT的熱度越來越高,不少人坦言:“人工智能領域正在引發(fā)新一輪科技競賽”,其實AI的學術競賽在2020年前后就已經開始。
OpenAI在這一年推出了著名的GPT-3,擁有1750億參數量;DeepMind的AlphaFold2在第14屆國際蛋白質結構預測競賽中奪冠;同時全球AI論文發(fā)表量逐年增長,來自中國的論文比例越來越高...... 頂會論文、大模型、科學智能代表的技術生態(tài),達到了前所未有的熱度。
同樣是在2020年,以昇思MindSpore等為代表的中國AI框架紛紛開源,開始了追趕TensorFlow、PyTorch等前輩們的追逐賽,中國AI框架的崛起和技術生態(tài)的繁榮,不可避免地出現了交叉。
就像Omdia在《中國人工智能框架市場調研報告》中給出的觀點:在大模型應用的趨勢下,國內開發(fā)者對于AI框架的認知發(fā)生了一些微妙的變化。
比如“對于超大規(guī)模模型訓練能力,您覺得哪個人工智能框架最好?”的問題中,36%的開發(fā)者投票給了TensorFlow/JAX,15%的開發(fā)者選擇的是PyTorch,昇思MindSpore以10%的占比排名第三。
需要說明的是,開發(fā)者的答案在某種程度上受到了認知習慣的影響,自然而然地給“老牌框架”打了高分。譬如谷歌的TensorFlow并非原生支持大模型,通過新推出的另一個新生框架JAX作為TensorFlow的簡化庫融入;PyTorch則是靠第三方并行算法庫補充了大模型支持能力。昇思MindSpore正依托原生支持大模型的能力快速崛起。
再比如“您認為最適合做AI for Science項目的人工智能框架是?”的問答下,TensorFlow和新生框架JAX收到了45%的開發(fā)者支持,昇思MindSpore在這個問題下超過了PyTorch,以37%的支持率排名第二。
而在人工智能框架使用率的排名中,TensorFlow和PyTorch的先發(fā)優(yōu)勢依然存在,但昇思MindSpore以11%的份額進入第一梯隊。TensorFlow早在2015年就已經開源,PyTorch的歷史也可以追溯到2017年,昇思MindSpore比“前輩”們晚了三到五年,但表現出了快速趕超老牌AI框架的態(tài)勢,扮演了“挑戰(zhàn)者”的角色。
如果說Omdia的報告主要是基于開發(fā)者的認知,可能與實際情況存在一定出入,那硬核的技術生態(tài)與行業(yè)生態(tài)的合作,則以板上釘釘的數字佐證著昇思MindSpore等中國AI框架崛起態(tài)勢:
在技術生態(tài)方面,昇思MindSpore已經與200多所高校、科研機構展開創(chuàng)新合作;在行業(yè)生態(tài)方面,僅在2022年獲得昇思技術認證的企業(yè)就超過800多家,涵蓋制造、金融、電信運營商等國計民生行業(yè);在開源生態(tài)方面,昇思MindSpore在Gitee AI開源項目綜合排名TOP1,軟件下載增速第一,總量已超過370萬……
02 昇思MindSpore越級的時與勢
一個殘酷但有現實意義的現象是,2020年AI框架市場還是一幅百家爭鳴的景象,目前卻出現了典型的虹吸效應。
按照Omdia的調研數據,在中國人工智能框架的使用率方面,TensorFlow、PyTorch、昇思MindSpore和飛槳合計占了86%的市場份額,大多數AI框架的使用率不足1%,曾經聲名鵲起的Caffe、CNTK等已逐漸掉出主流隊伍,只有昇思MindSpore一家逆勢進入了AI框架的第一梯隊。
想要弄清問題的答案,昇思MindSpore可以說是最好的研究對象。過去近三年時間里,昇思MindSpore到底做對了什么?
第一個參考答案是大模型的“時”。
2021年9月的華為全聯接大會上,昇思MindSpore迭代至1.5版本,最直接的變化就是原生支持AI大模型訓練,通過全自動并行、可視化智能調優(yōu)等大幅提升了大模型的開發(fā)效率。
其中在大模型并行訓練上,昇思MindSpore支持數據并行、MoE并行、優(yōu)化器并行、多副本并行等7大并行計算能力,將訓練千億模型的代碼量降低了80%、調優(yōu)時間下降60%;和TensorFlow、PyTorch等框架相比,昇思MindSpore是支持模型結構最全的AI框架,包含稠密、稀疏MoE、卷積結構、高維稀疏等。
第二個參考答案是應用創(chuàng)新的“勢”。
2022年11月發(fā)布的2.0版本中完成了AI與HPC的融合,通過神經網絡模擬的非線性擬合,讓科學家無需再解高維方程,進一步提升了科技創(chuàng)新效率。特別是在產業(yè)應用創(chuàng)新方面,昇思MindSpore構建了流體仿真、電磁仿真、分子模擬在內的科學計算套件,持續(xù)使能應用創(chuàng)新。
和PyTorch的興起不謀而合,昇思MindSpore也將技術生態(tài)作為“先手棋”。印證昇思MindSpore “路線正確”的案例,絕不止Omdia的報告和開發(fā)者的認同,還有一份沉甸甸的成績單。
衡量創(chuàng)新能力的一個重要標準正是論文數量。按照Papers with Code網站的統(tǒng)計數據,2022年使用昇思MindSpore的頂級會議論文已經超過600篇,在國內AI框架中排名第一,在全球范圍內僅次于PyTorch。
而在大模型的創(chuàng)新中,目前國內科研院所和高校已經發(fā)布了10多個基于昇思MindSpore的大模型。其中紫東.太初是全球首個三模態(tài)大模型,能夠實現視覺、文本、語音三個模態(tài)間的高效協(xié)同,曾在2022世界人工智能大會上斬獲“卓越人工智能引領者”獎;東方.御風是業(yè)界首個工業(yè)級流體仿真大模型,在進行飛機流場模擬仿真時,對比傳統(tǒng)的科學計算,在精度一樣的情況下,東方.御風的仿真時間只需要原來的1/25。
如果把人工智能產業(yè)生態(tài)比喻成森林的話,人工智能框架就像是森林中的土壤,尋求創(chuàng)新的開發(fā)者自然會“擇水土而居”。
03 不應被忽視的可信AI問題
在全民“調戲”ChatGPT的風潮中,ChatGPT有時會“一本正經地胡說八道”,這其實暴露了存在事實性錯誤、知識盲區(qū)和常識偏差等諸多問題。
Omdia在《中國人工智能框架市場調研報告》中向開發(fā)者詢問了類似的問題,最終的答案似乎超出了一些人的料想:在所有主流人工智能框架中,國內的開發(fā)者普遍認為TensorFlow 與 昇思MindSpore 對“負責任的人工智能”提供的支持最好。
個中原因其實不難解釋。為了打消開發(fā)者擔心的安全隱私等問題,谷歌通過Model Cards等工具讓框架更加透明、更具備可解釋性,同時TensorFlow也提供了一系列支持數據安全和隱私的功能、庫和培訓工具。
昇思MindSpore之所以能夠在可信方面超越PyTorch,離不開對AI安全技術體系的布局,提供了涵蓋AI訓練、AI測評、AI部署的一整套端到端的安全可信體系,包括聯邦學習、模型水印、模型加密等外界所熟知的可信機制。
比如聯邦學習是一種常見的隱私保護方式,可以在不收集數據的情況下協(xié)同進行模型的訓練,實現數據的“可用不可見”,繼而保護隱私信息。然而聯邦學習和大模型的結合也產生了諸多挑戰(zhàn),涉及到計算代價、通信開銷、隱私泄露、模型安全等等,需要解決隱私保護與效率的兩難課題。
昇思MindSpore的回答是跨域可信訓練。
以鵬城.盤古大模型為例,昇思的聯邦學習能力助力盤古超大模型協(xié)同訓練,根據各地算力情況將大模型拆分,以AI計算中心超大算力實現盤古主干網絡的正反向訓練,同步在銀行等計算機房做數據處理,模型Embedding、TOP層算Loss正反向訓練,實現了敏感數據不出本地,并讓聯邦學習的訓練時延降低了30%、通信和計算開銷降低了40%。
就像Omdia在報告中的評論:“負責任的人工智能”即是一套道德準則,又是一套技術體系, 是以安全、可靠和合乎道德的方式開發(fā)、評估、部署和規(guī)?;斯ぶ悄芟到y(tǒng)的方法,對人工智能的可持續(xù)發(fā)展非常重要。
大模型、科學智能等技術生態(tài)在過去三年時間里深入影響了開發(fā)者對AI框架的選擇,把時間再拉長一些的話,能否在可信AI方面有所作為,能否打消開發(fā)者的疑慮,無疑將左右AI框架下一個三到五年的市場排位。
04 寫在最后
人工智能的星星之火能否燎原,AI框架有著不可或缺的作用。
一座城市的繁榮,不在于有多高的摩天大樓,而是無處不在的建筑群。沿循這樣的邏輯,AI框架的價值在于賦予不同的開發(fā)者“建造高樓”的能力,讓人工智能的前沿能力進入每一個行業(yè)、每一家企業(yè)。
至少,以昇騰AI為首的中國人工智能產業(yè)建設者早已開始發(fā)力。
不只是昇思MindSpore在技術生態(tài)上的異軍突起,Atlas系列硬件、異構計算架構CANN、昇騰應用使能MindX等軟硬件也在持續(xù)創(chuàng)新,為開發(fā)者打造了“端、邊、云”的全場景AI基礎設施,讓人工智能在千行百業(yè)不斷擴散。
申請創(chuàng)業(yè)報道,分享創(chuàng)業(yè)好點子。點擊此處,共同探討創(chuàng)業(yè)新機遇!
2023年7月6日,第六屆世界人工智能大會(WAIC2023)在上海開幕,“人工智能大模型”是本屆大會的備受矚目的話題,據悉,在昇騰AI大模型的創(chuàng)新研發(fā)中,華為聯手26家行業(yè)領軍企業(yè),組建了一支協(xié)同創(chuàng)新的“AI明星隊”,云天勵飛作為中國人工智能企業(yè)的杰出代表,和互聯網大廠、運營商、科研院所等優(yōu)秀團隊
這幾個月來,以ChatGPT為代表的生成式AI展現出的能力令世界驚嘆。自從2016年AlphaGo戰(zhàn)勝李世石掀起了一波AI浪潮后,AI仿佛已經沉寂了很久,ChatGPT的橫空出世就如同一束耀眼的光芒,讓AI這個名詞重回C位。過去在AI1.0時代,主要通過訓練模型來實現圖像識別、聲音識別、語言處理等特
文:互聯網江湖作者:志剛2023年的IoT需要一個新故事。6月29日,涂鴉智能在開發(fā)者大會上,發(fā)布了企業(yè)級戰(zhàn)略PaaS2.0,希望通過一個平臺+四大開發(fā)服務,建立起IoT生態(tài)。對于這場發(fā)布會,市場的態(tài)度是積極的。美東時間6月29日收盤,涂鴉智能美股股價上漲5.6%,來到1.87美元/股。近日股價穩(wěn)定
美團曾經的二號人物王慧文對標OpenAI的創(chuàng)業(yè)項目光年之外,以20億賣給美團,再度引發(fā)市場對大模型的熱議。
2020年底,王慧文在朋友圈寫下這句話時,外界本以為這位伴隨中國互聯網發(fā)展而持續(xù)創(chuàng)業(yè)20年的人物即將告別創(chuàng)業(yè)舞臺。但是,一個曾經多次創(chuàng)業(yè),正值壯年的互聯網老將心中的創(chuàng)業(yè)熱情是難以熄滅的。
我不是危言聳聽,現在全球的AI巨頭都在做MCP,毫不夸張的說:誰能把MCP做起來,誰就擁有AI生態(tài)控制權,誰就是AI圈的老大。你們有沒有發(fā)現,MCP在2025年初開始特別火爆,互聯網技術大廠都在強推MCP。(1)阿里云百煉搞了個MCP平臺,提供50+預置MCP服務。不過大都只面向阿里系產品。(2)騰
2025國際人工智能程序設計精英挑戰(zhàn)賽(IAEPC)在香港中文大學成功舉辦。作為主辦方之一,歐美同學基金會理事長李軍接受了大賽主持人艾誠采訪。在采訪中,李軍認為IAEPC不僅是一場“冠軍中的冠軍”對決,更是一次全球AI人才的線下交流盛會。大賽“史無前例”的吸引了全球青年科技精英匯聚香港,更加推動和普
2025國際人工智能程序設計精英挑戰(zhàn)賽(IAEPC)在香港中文大學成功舉辦。作為大賽發(fā)起人方之一及裁判委員會負責人,施韓原與杜瑜皓接受了大賽主持人艾誠采訪。裁判委員會主席施韓原分享了此次大賽的亮點,IAEPC首次引入創(chuàng)新賽道,探索選手如何與AI合作進行答題。裁判委員會副主席杜瑜皓認為,選手最終目標并
2025國際人工智能程序設計精英挑戰(zhàn)賽(IAEPC)在香港中文大學成功舉辦。來自深圳的學生吳林林作為主辦方記者團成員,采訪了大賽冠軍選手之一。在吳林林的采訪中,選手認為與來自全球的參賽者交流是自己學到的最重要的一課。在科技與AI之前,選手們可以平等、開放、友好的交流。以下是采訪實錄(有刪節(jié)):吳林林
2025國際人工智能程序設計精英挑戰(zhàn)賽(IAEPC)在香港中文大學成功舉辦。來自深圳的學生吳林林作為主辦方記者團成員,采訪了大會嘉賓:全國政協(xié)委員、香港特別行政區(qū)立法會議員、香港中文大學工程學院副院長、IAEPC聯合發(fā)起人黃錦輝先生。在吳林林的采訪中,黃錦輝教授勉勵年輕人要像懂中文和英語一樣懂AI,
昨天新出了一個AI,據說比DeepSeek還牛,而截止到今早,已經有10萬人在排隊申請Manus邀請碼了,而且它邀請碼已經炒到10萬了。這是北京的一家人工智能公司蝴蝶科技,創(chuàng)始人是一名來自華中科技大學的90后畢業(yè)生肖弘,突然向全球宣布:世界上第一款真正的人工智能、通用智能體產品出現了,名叫Manus
謠言肆虐,擦亮眼睛
蘋果16弄了兩個版本,一個是專門給中國人用的,準備用百度的AI,還要交錢。第二個是全世界都可以用的,用了ChatGPT,包括臺灣、香港、澳門都可以用。以后都這樣了。好,問題就出在這,蘋果和百度的合作出現問題了,新聞連起來看,才能明白其中含義。新聞一:蘋果正在和騰訊、字節(jié)初步接洽,考慮將二者的AI模型
“技術日新月異,人類生活方式正在快速轉變,這一切給人類歷史帶來了一系列不可思議的奇點。我們曾經熟悉的一切,都開始變得陌生。”計算機之父約翰·馮·諾依曼曾這樣說到。