加密貨幣交易所 加密貨幣交易所
Ctrl+D 加密貨幣交易所
ads
首頁 > 火必 > Info

4 月大模型混戰 華為阿里商湯都走到哪了?_GPT:HAT

Author:

Time:1900/1/1 0:00:00

3 月下旬,英偉達在美國加州總部舉辦了面向軟件開發者的年度技術峰會 GTC。會上,創始人黃仁勛發布了專用于大語言模型部署的 GPU 推理平臺——H100 NVL,其或將在推理階段實現比現有最先進的 A100 快 10 倍的速度。

但如此先進的 GPU 卻無法運往國內,去年 8 月,美國監管機構以國家安全為由,對 NVIDIA A100、H100 兩款 GPU 實施禁令,不得銷售給國內企業,意在通過“卡脖子”的方法來降低國內 AI 模型的傳輸速度,拖延中國人工智能發展。

而目前也確實對國內 AI 企業產生了較大的影響,在算力的大需求之下,呈現出了“一卡難求”的情況,就連閹割版的 A800 也一直處于缺貨的狀態。

但與 GPU 硬件窘迫的境況不同的是,在繼 3 月 16 日百度發布文心一言大模型后,國內眾多科技、AI 巨頭都相繼公布了各家大模型的發布會時間:4 月 8 日華為盤古大模型發布、4 月 10 日商湯大模型發布、4 月 11 日阿里大模型發布、4 月 14 日同花順舉辦 AI 產品發布會,國內大模型的“百家爭鳴”與 GPU 被禁運后的“慘淡”狀況,也形成了鮮明的對比。

這個 4 月,成為國產大模型混戰期。

那么,在 GPU 受限的情況下,國內 AI 行業發展境況如何,能否交出屬于他們自己的答卷?未來的發展是否會與國外越差越大?

本文,奇偶派以已經發布或近期即將發布的大模型與相關 AI 應用的企業為例,通過專家訪談等方式,研究和分析各企業 AI 大模型的發展狀況。

華為盤古大模型,最近的發布多少有點高開低走,突破性進展不多,尤其是在 C 端幾乎沒有新應用側產品,主要還是展示了華為在 B 端智能化方向上的技術實力,為華為云服務和可見的銷售市場做技術支撐。

4 月 8 日,在人工智能大模型技術高峰論壇上,華為云人工智能領域首席科學家田奇介紹了盤古大模型的進展及其應用狀況,包括 NLP(自然語言處理)大模型、CV(機器視覺)大模型、科學計算大模型、多模態大模型、語音大模型等的研發與應用的相關情況。

以太坊核心開發者共識會議:即將上線 EIP-4844 專用短期測試網絡 Devnet #7:7月1日消息,Galaxy 研究副總裁 Christine Kim 發文總結第 112 次以太坊核心開發者共識會議,本周開發人員討論了在 Engine API 中包含 builder override flag,將目標 blob 限制 從 2 上調到 3,將最大 blob 限制從 4 上調到 6,以及圍繞更改驗證器最大有效余額的持續研究。Blob 容量的增加是由以太坊基金會研究 Dankrad Feist 在進行數據實驗測試處理大塊的網絡容量后提出的。

以太坊基金會 DevOps 團隊的 Parithosh Jayanthi 表示,所有 EL 和 CL 客戶端團隊都通過了 Devnet #7 的相關 Hive 測試。他的團隊計劃最早在 6 月 30 日或 7 月 3 日推出 Devnet #7。Devnet #7 是 EIP-4844 的專用短期測試網絡,不會測試其他代碼更改。

另外,開發人員正準備在今年年底前棄用公共 Goerli 測試網絡。為了取代 Goerli,以太坊客戶團隊正在啟動一個名為 Holesky 的新測試網,測試網將托管一個大于 Goerli 和以太坊主網的活動驗證器集。[2023/7/1 22:12:05]

在會前,最引人關注的莫過于盤古的 NLP 大型模型,據介紹,該模型利用了深度學習與自然語言處理技術,并且采用海量中文語料庫對其進行培訓。

而在參數和數據的堆量方面,百度文心一言參數為 100 億,數據為 4 TB。而 GPT-4 則達到了 1750 億,數據 45 TB。華為盤古大模型的參數高達 1000 億,數據高達 40 TB。如果單從參數上看,盤古大模型已接近 GPT-3.5。

但在這次發布會中,田奇卻并沒有提到盤古 NLP 大模型的相關應用。只是將過去已經發布的功能,進行了較為簡單的集合介紹。相對而言,另外兩個大模型則著墨更多,以較多篇幅介紹了 CV 大模型和科學計算大模型的應用范例。這也讓眾多翹首期盼華為能發布一款趕上 ChatGPT 應用的“粉絲”們,多少有一些失望。

Terra Phoenix 空投提案已通過,符合條件的用戶可在9月 4 日后認領 LUNA:9月2日消息,Terra Phoenix空投提案已通過,該提案旨在將社區池約 1950 萬枚 LUNA 空投給由于技術限制或與索引相關問題而在 Genesis 時未收到正確分配的LUNA的用戶。符合條件的用戶將可以從 2022 年 9 月 4 日到 2022 年 10 月 4 日領取他們的空投。2022 年 10 月 4 日之后未認領的 LUNA 將返回社區池。[2022/9/3 13:05:52]

但實際上,早在發布會之前的相關交流中,內部專家就已經就該話題做出了相關回答:

“首先,在華為發展歷史上,很少是在新的趨勢出現后立馬就追上來的。公司發展的 30 多年間,基本沒有做到過先發,而是一直采用后發制人的打法,在手機、在云、在汽車上是如此,在這個領域中也會如此。”

“想要做出一個比較完美的 NLP 大模型,是一個集團級的項目,通常做出決定會比較緩慢,在一兩年內也不太會出現。而當前公司在盡力地完成 AI 工程化、AI 產品化,公司認為這是商業化不得不走的路線,如果采用高度項目制,成本很高,并且也會出現項目不可復制的情況,因此華為的重點最后才放在了面向行業的 CV 大模型上。”

正如相關專家所說的,盤古大模型中最為領先的,正是 CV(機器視覺)大模型。

會上,田奇還談到,在過去的 2022 年,華為盤古大模型主要是 AI for Industry(AI 賦能產業),為煤礦、水泥、電力、金融、農業等行業創造了更多產業價值,其中 CV 大模型早就有了許多用武之地。

比如在與能源公司合作的盤古礦山大模型中案例中,礦井現場是一個 40 米長的采掘機,寬度僅 2 米左右,傳統相機很難一下子捕捉到全部畫面,只能用圖中的九宮格視頻畫面。而通過 5 G+AI 全景視頻拼接綜采畫面卷,傳輸到地面,地面工作人員將來可以實現地面控制機器進行采礦,實現礦下無人少人安全作業。

盤古礦山大模型還用在了煤礦的主運輸皮帶作業監控。煤礦被采集下來以后,它會通過一個主運輸皮帶,從地下傳輸到地上。按傳統方法是通過工人配合作業,華為提出通過視頻對作業的安全規范進行巡檢,主運場景的異物識別精度達 98%,煤礦作業場景動作識別準確率達 95%,助井下安全事故減少 90% 以上。這些都是 CV 大模型的落地應用。

以太坊開發者:以太坊合并日期提前了 4 天將導致1億美元的額外ETH發行量:金色財經報道,以太坊開發者ansgar.eth在社交媒體上稱,在今天的電話會議中,我們將合并日期提前了 4 天,從9月19 日提前到 9月15日。這4天的PoW將導致1億美元的額外ETH發行量。Protocol Guild(一個核心開發資助組織)在其整個存在期間總共籌集了 1000 萬美元。

決定不提供協議內核心開發資金是一個非常艱難的選擇。這就是我們對以太坊可信中立性的重視程度。[2022/8/12 12:21:28]

此外,大模型還能進行軌道機車缺陷檢測,比如掉鏈、脫落、裂痕等潛在不安全因素,人工檢測成本較高,盤古大模型提供圖像質量的自動評估、小樣本的故障定位與識別等。

可以說,華為選擇了一條與其他 AI 企業不一樣的道路——暫時放棄以 ChatGPT 為代表的 C 端需求,專注 B 端工業需求的開發。

不可否認,華為作為國內受美國制裁最嚴厲的公司,無論從算力資源、或是從公司發展理念、又或者是從商業化角度來看,選擇專精于 B 端的打法是正確的。一來可以避免超大數據量的訓練,二來又可以為處于“寒冬”中的集團早日“造血”。

或許,在算力無法獲取之時,不去糾結內耗于 ChatGPT,才是華為真正的 AI 之路。

緊接著華為盤古大模型發布后,商湯科技的大模型也即將登場。

不過,由于上市公司相關信披原因,目前公司正處于發布大模型之前的靜默期,所以沒有辦法披露過多的大模型相關內容。但是,作為最早把人工智能大模型寫入招股說明書的公司,商湯確實是有著足夠的實力,來推出獨屬的大模型。

而在近期的相關交流中,商湯相關人士還是回答了一些與算力相關的問題。

首先是大眾最關注的算力資源方面,商湯擁有極為充足的 GPU 儲備,對方表示,在去年停售之前就有 1 萬張 A100 芯片了,完全可以覆蓋訓練一個千億參數量的語言模型的消耗。

而除了英偉達專用顯卡外,商湯也有采購國內的 GPU,專家表示:“比如說寒武紀與海光,最近這兩家公司可能很多投資人都很關注,想了解他們的產品是否進入了大規模試用階段。但是,如果大家在去年有去參觀我們商湯的大裝置的話,就應該看得到我們在大裝置里面已經適配了很多寒武紀和海光的 GPU 卡,我們也是寒武紀最大的客戶之一”。

BSV平均算力為515.84 PH/s,創近兩年來新低:據OKLink數據, BSV平均算力昨日為515.84 PH/s,創近兩年來新低。[2021/3/23 19:10:07]

而在談及國產替代方面時,專家也坦言,“我們很早就開始與國產 GPU 廠商合作,去適配國產 GPU 卡,但坦白來說,當前的大模型訓練,確實是只有 A100 與 A800 能夠勝任,國內 GPU 卡的易用性與性價比都無法去比較,但在推理階段,寒武紀最新款的 GPU 在大模型領域也有了不錯的表現,期待未來會更好。”

而在被問及 H100 出現是否會對國內 AI 企業產生影響時,專家表示,H100 加速芯片的出現,確實在性價比上有十分顯著的提高。但如果不考慮性價比的話,當前已有的芯片是完全可以勝任的。

而在算力的使用技術方面,商湯較眾多 AI 企業來說有著極為明顯的優勢。

在 A100 存量優先的情況下,如何利用僅有的資源去做更多的事情,成為了商湯需要解決的一大問題。

專家表示,商湯科技在過去五年中,有著豐富的千卡并行的訓練經驗,最大的單任務訓練可以同時調動 4000 張 A100 的 GPU 卡,等效算力為 1 萬張 A100,已經達到了訓練 GPT3 甚至 GPT4 的門檻。

而在國產 GPU 的優化適配上,商湯也同樣有豐富的經驗,“目前有 10% 左右的算力,是由國產 GPU 卡提供了,商湯也一直在進行適配,無論是規模比較大的寒武紀、海光,或是當前規模比較小的昇騰,都有著相應的適配支持”。

也正是因為多年的訓練經驗,讓商湯獲得了較為明顯的優勢,“我們目前的算力規模可以支持 20 個千億參數量超大模型共同計算,同時訓練,對客戶的技術迭代有十分明顯的幫助。”

但被問及當下的挑戰之時,專家再次重點提到了國產 GPU 的適配問題。即當前國產 GPU 不太能夠支持超大模型的訓練,還需要投入更多去進行優化。此外,雖然國產 GPU 已經展現了一定的能力,但依然任重道遠。

動態 | 全球對區塊鏈投入已超14 億美元 專利超2500項:據工信部官方文件顯示,過去三年,全球對區塊鏈的創業資本投入已超過 14 億美元,目前已有超過2500項專利。應用解決方案涵蓋資產交易、云存儲、數據身份管理、醫療數據管理等方面。[2018/7/3]

總的來說,商湯科技作為最早一批的 AI 企業,有著極為深厚的訓練經驗,也在禁運之前拿到了上萬張 A100 顯卡,這讓其在當前的 AI 大戰中擁有了極強的競爭力。

但從另外一個角度來看,短期內高端 GPU 禁運的影響還可以通過豐富的訓練經驗、更大的成本投入來進行掩蓋,但從長期來看,如何能持續獲得高端 GPU,才是商湯需要考慮的問題。如果禁運依舊存在,并且國產 GPU 無法適配超大模型的訓練,那么與國際尖端 AI 企業、與最先進的大模型之間的距離,將會被持續拉開。

4 月 4 日,B 站一則阿里版 ChatGPT 全網首測視頻流出,引爆全網,同日下午,阿里正式宣布將于 4 月 11 日的阿里云峰會上推出大模型。

從視頻中看,阿里大模型超出大家預期的主要有兩點:

一是“音色”“文風”“情緒”都可改變,定制化屬性顯現,受眾面大幅增加,視頻中 UP 主先是運用了脫口秀演員“鳥鳥”的聲音作為模型交流,然后并要求 ChatGPT 接下來用“貓娘”的身份進行后續對話,整體定制化特征明確,不再局限于固定形式,代表著后續每個人可根據自己的需求定制屬于自己的“性格”不同的 ChatGPT,幾乎可滿足所有受眾群體。

二是阿里 GPT 的成熟程度超出預期,15 個問題中有 10 個問題的回答都明顯好于國內已經公布的競品,并且突破了雙工對話,整體帶入性更強。

而就在發布前的一周,也有相關內部專家接受了采訪,回答了“國內語言大模型與 ChatGPT 有多大差距”的相關問題。

專家表示,起碼在未來的一年到一年半之間,國內是絕不可能出現對標 GPT4 的產品的,只有先把 ChatGPT(GPT-3.5)追上,才有資格去談 GPT4。目前,國內大多仍然都是以文本、圖像、視頻等單模態的方式發布的,并且文本大模型已經進入商用階段,百度走出了第一步,其他的眾多 AI 企業和科技企業也都會在年中或者下半年進行發布。

而在追趕 GPT-3.5 的過程中,也有著三個核心瓶頸:

一是數據量的不足,只有擁有了足夠多的數據,才能繼續訓練,而公有的數據大家都可以買到,所以核心競爭點是如何獲得足夠多的私有數據,權重占比達到了三成左右。

二是模型結構的創新性,國內的語言大模型目前做不成高層級的架構,也就沒辦法做海量的數據訓練,也是最大的瓶頸,權重達到了四成左右。

第三便是工程化的能力,在工程落地的時候,大家都知道需要預訓練、調優訓練與推理訓練,但在真正部署的時候,是完全要靠自身去摸索的,包括數據的處理,模型的訓練,模型優化,模型的部署和運用,都需要投入大量的時間、精力與財力,這方面的權重與數據量類似,也是達到了三成的權重。

但這一切的前提是算力充足,阿里是當前國內擁有 A100 GPU 最多的企業,在當下階段算力并沒有多大阻礙,但未來伴隨著禁運的持續與算力需求的增加,也將面臨高端運算卡不足的情況。

而在追趕 ChatGPT 之外,電商作為阿里起家的領域,也讓人好奇阿里大模型將會為電商領域帶來多大的改變。

專家表示,在電商場景中,比較主要的還是推薦算法與營銷圖案、文本的生成。未來,阿里大模型將會包攬營銷圖案、產品介紹、產品描述等工作。

“實際上,去年我們就已經讓一些商家使用這個技術了,我們挑選了上百個商家,預計要花數百萬去請廣告公司去做的營銷圖案,阿里大模型的 AI 都可以勝任,cover 40% 的工作量。”

“而在營銷之外,還有虛擬直播等許多場景可以被替代,包括倉儲預測、物流信息的挖掘,都需要一步步找場景滲透,慢慢將老一代的技術進行替代,幫助中小企業,最終達到雙贏”。

總的來說,阿里大模型作為一個龐大集團下的一條項目線,看起來并不像其他 AI 科技企業那么出彩。但目前,阿里的文本大模型進度在國內也已經位屬前列,并且其他模型也在有序推進之中。

不過,這一切的前提是算力的充足,伴隨著技術的推進與數據量的增加,在未來,算力可能仍是邁不過的那道坎。

而在 AI 巨頭與科技公司之外,各行各業的企業其實早已經將 AI 應用于實際業務中,而同花順就是其中一員,4 月 14 日,同花順也將舉辦 AI 產品發布會。

實際上,同花順的 AI 產品,早就已經應用,主要包括 i 問財、基于 AI 技術的增值服務產品與 B 端 AI 產品。

其中,同花順主打的便是 i 問財這款 AI 產品。i 問財是目前財經領域落地較為成功的自然語言交互問答系統,而公司也在 2022 年進一步加大對其研發投入,采用全新的語義解析方案,結合 AI 大模型、小樣本學習等技術的應用,有效提升 i 問財服務效率,可將服務場景從財經領域擴展到通用領域,從中文場景擴展到多語言場景。

通過 i 問財機器人,我們可以獲得相關資訊、數據以及 AI 的點評;還可以準確地提供 A 股公司的基本面及板塊情況,并通過多類圖表的形式顯現出來;還可通過向問財機器人提問,實現條件選股,是市面上成功的一款財經 AI。

而在 AI 之風的推動之下,同花順的股價也節節走高。自 3 月 17 日以來,在短短 12 個交易日中,股價便從 115.57 元上漲至最高的 239.22 元,完成快速翻倍。

在股價飆漲的背后,同花順能否發布更有含金量的 AI 應用,我們還無從得知。但如果僅僅以目前的 AI 應用水平,是絕無可能撐起如此高的市值的。

而同花順的 AI 含金量究竟如何,或許只有當其產品發布之時,我們才能知曉吧。

縱觀國內已經發布的文本大模型或者 AI 應用,亦或是與各企業相關專家進行交流,我們都能發現一個問題,那就是國內的大模型水平,實際上才剛剛起步。

在硬件方面,英偉達高端 GPU 遭受禁運,國內只能拿著為數不多的 A100 與閹割版的 A800 進行訓練和推理。當前尚可通過豐富的訓練經驗,更高的資本投入來短暫掩蓋國內算力嚴重不足的事實。但若是站在更高處,GPU 發展嚴重落后,終將成為殺死中國 AI 的一把利刃。

而在算法層面,國內 AI 企業也面臨著極為尷尬的局面,讓一群善于應用創新的企業直接去做底層創新,無異于趕鴨子上架。在國外 AI 企業不再開源

算法后,如何找到模型開發的創新點,才是最困難的。對于一直停留在 64 層的眾多國內 GPT 模型來說,想要對標 ChatGPT 甚至 GPT-4,無異于癡人說夢。

不可否認,應用層面的“軟實力”,可以讓一家 AI 企業快速找到盈利的目標,但在真正的國產 AI 戰爭打響之后,硬件和算法層面的“硬科技”,才是我們當前最缺乏的能力。

若只重視應用層面而忽略硬件與算法層面造出來的商業輝煌,就像井中月、水中花一般,雖然美麗,但一經波瀾便稍縱即逝。也只有真正擁有算力、算法層面的能力,才是中國 AI 發展歷程中真正的進步。

我們的算力之戰和算法之戰剛剛拉開序幕。

此刻,中國 AI 的翻身之戰,需要一些真正的“硬核武器”,才能正式打響。

巴比特資訊

個人專欄

閱讀更多

金色財經 善歐巴

Chainlink預言機

金色早8點

白話區塊鏈

Odaily星球日報

Arcane Labs

歐科云鏈

深潮TechFlow

BTCStudy

MarsBit

Tags:GPTCHA以太坊HATHGPT價格ARCHA以太坊交易軟件chat幣發行價

火必
Sui主網即將上線 如何獲取Token?_SUI:MOVE

目前SUI Network沒有正式的空投計劃,但是SUI Network已經發布了SUI Token社區訪問計劃,以及SUI Token的分配細節.

1900/1/1 0:00:00
品牌 NFT 項目在境外運營的法律合規事宜_NFT:BSPAY幣

繼前 21/22 年 NFT 大爆發之后,我們看到 PFP NFT 業內已經建立了以 ABCD(Azuki、BAYC、Clonex Doodles)為標桿的 Web3 IP.

1900/1/1 0:00:00
晚間必讀 | 以太坊上海升級 DeFi 3.0 的序章_以太坊:WEB3

4月12日起,由萬向區塊連實驗室、HashKey Group聯合推出2023香港Web3嘉年華將在香港連續四天舉行.

1900/1/1 0:00:00
以太坊2023年第一季度表現分析 未來可期_以太坊:BIT

關鍵內容 2023年第一季度是加密市場的復蘇時期。傳統金融領域的動蕩突顯了對中立無國界貨幣和去中心化金融基礎設施的需求。隨著市場信心的提振,以太坊生態系統各個領域的活動均有所改善.

1900/1/1 0:00:00
DAO資金掠奪者是如何榨干國庫的_DAO:TmoLand

DAO在加密領域獲得了極大的關注和投資,其中有幾個DAO在各自的國庫中管理著數十億美元。然而,并不是所有DAO的參與者都有著高尚的目的.

1900/1/1 0:00:00
DeFi 巨頭 Aave、Curve 推出穩定幣 重塑去中心化 3Pool_USD:usd幣匯率

Aave 原生穩定幣 GHO、Curve 原生穩定幣 crvUSD 是加密社區最近熱議的大事件,是時候對 DeFi 最著名的穩定幣池之一進行重塑了.

1900/1/1 0:00:00
ads