或許每一次歷史潮流的開場,總是這么熙熙攘攘,年初被ChatGPT引爆的AI大型語言模型(LLM),又迎來一位重磅入局者——StabilityAI。
4月19日,推出火爆AI繪畫賽道StableDiffusion的開源模型的公司StabilityAI,宣布“加入戰局,叫板ChatGPT”,推出開源大語言模型StableLM。
在StabilityAI公告大語言模型的網頁上,一只體現了StableDiffusionXL作畫特點的綠鸚鵡先于語言大模型的介紹出現了,大語言模型的"StableDiffusion”時刻或許就這樣不期而至。
對于大語言模型StableLM,網站介紹道:
目前StableLM的Alpha版本中擁有30億和70億參數。
已經可以從GitHub等開源平臺上下載:https://github.com/stability-AI/stableLM/
Cosmos Hub新提案建議部署流動性質押模塊 (LSM):5月6日消息,Cosmos Hub 已通過一項新提案,用流動性質押模塊 (LSM) 替換現有的 Cosmos Hub 質押、分配和削減模塊。PoS 區塊鏈的設計使得驗證者必須鎖定他們的代幣才能參與保護網絡并獲得獎勵,對于Cosmos,這意味著驗證者必須鎖定ATOM代幣。 一旦令牌被質押到網絡中,驗證者必須等待 21 天才能再次使用它們,部署 LSM 意味著 ATOM 代幣持有者將能夠流動性抵押他們已經抵押的代幣,而無需等待 21 天的解除綁定期。 此外,LSM 將引入一種稱為“validator bond”的機制,其中每個驗證者必須以 1:250 的比例自行綁定ATOM ,才能從流動性質押中獲得 ATOM 代幣。[2023/5/6 14:45:46]
StabilityAI后續還將推出150億至650億參數的版本。
與StableDiffusion類似,開發者可以在遵守協議的情況下,將這個模型用于商業或研究活動。
抨擊OpenAI不夠“open”的StabilityAI,能穩定發揮,推出超越ChatGPT的大語言模型嗎?
P2E鏈游Medieval Empires完成210萬美元種子輪融資:10月5日消息,據報道,“Play-to-Own”鏈游 Medieval Empires 宣布完成 210 萬美元種子輪融資,Evan Luthra、James Crypto Guru、Satoshi Stacker、Crypto King 和 Davinci Jeremie 等多位天使投資人參投。
Medieval Empires 是一款多人在線戰略游戲,背景設定在 13 世紀后期,玩家可以構建自己的帝國并配合使用 NFT 在游戲里開疆拓土,據 Medieval Empires 首席執行官 Jan Berkefeld 透露,他們后續還將進行私募融資。(itnewsonline)[2022/10/6 18:40:25]
大語言模型的“安卓時刻”
StabilityAI成立于2019年,是生成式AI領域最知名的公司之一。
在ChatGPT“占領”的大語言模型市場上,不少人期待著類似StableDiffusion的開源模型能盡快出現。
大語言模型的"StableDiffusion”時刻可能在十幾個小時前到來了。
西班牙電信巨頭Telefonica與高通合作開發元宇宙計劃:金色財經報道,西班牙電信巨頭Telefonica與芯片設計公司商高通簽署了合作伙伴關系,以推進聯合擴展現實和元宇宙計劃。Telefonica將使用高通公司的一項新技術 Snapdragon Spaces 為其客戶帶來這些元宇宙體驗,該協議還包括尋求聯合商業機會的可能性。[2022/9/27 22:33:25]
AI軍備競賽的開啟可以追溯到去年7月,在OpenAI的繪畫模型DALL-E2之后,StabilityAI發布的模型圖像生成模型StableDiffusion,因其源代碼開源,且對公眾開放使用,在當時吸引了更多的注意力。
StabilityAI把StableLM的發布比作了StableDiffusion,這讓AI可以繼續服務所有人:
2022年,StabilityAI推動了StableDiffusion的公開發布,這是一款革命性的圖像模型,代表了透明、開放、可擴展的AI。
這次我們發布開源StableLM模型,想繼續讓所有人都能使用AI。
我們的StableLM模型可以生成文本和代碼,并將支持一系列下游應用。
幣安:目前暫無將USDT自動轉換為BUSD的計劃:9月6日消息,幣安表示目前沒有計劃對USDT進行自動轉換,但“可能會改變”。此外,幣安還表示自動轉換和停止為USDC提供大部分交易服務“不是臨時措施”。(Cointelegraph)
此前消息,9月6日,幣安官方發布公告表示,為了提高用戶的流動性和資金使用效率,幣安對用戶現有的USDC、USDP、TUSD Stablecoin余額和新充值將以1:1的比例自動轉換為BUSD。[2022/9/6 13:11:17]
正如StabilityAI的CEOEmadMostaque所說,他們最新發布的LLM代表著StabilityAI的初心“開源”:
現在每個人都可以在HuggingFace上測試驅動這個7B版本的聊天機器人。
EmadMostaque認為,LLM不應在大公司內部進行訓練,社區系統的開放性也至關重要,需要更多監督,巨頭控制流量算法的游戲規則——是對人們的操縱。
完美世界:“三步走”推動元宇宙游戲實現,已完成虛擬偶像及區塊鏈相關的技術儲備:7月31日消息,完美世界(002624.SZ)7月29日在投資者互動平臺表示,公司看好元宇宙的未來前景,立足內容優勢,正在積極探索元宇宙相關布局。公司在元宇宙游戲方向的工作會分階段逐步推進實現:第一步,依托現有游戲,實現元宇宙的早期積累。目前,公司技術中臺已完成虛擬偶像及區塊鏈相關的技術儲備,為公司內部不同游戲推出各自的虛擬偶像或區塊鏈技術的應用提供全方位的技術支持;第二步,借助開發中的新游戲,實現元宇宙更深層次的積累;第三步是元宇宙在游戲上的終極呈現。通過重磅游戲產品,借助數字孿生、智能AI擴展、虛擬數字人等等,在更加宏大的世界,實現游戲體驗的無限延伸。關于公司具體業務的信息,請您以公司的官方新聞為準。[2022/7/31 2:48:55]
EmadMostaque來源:StabilityAI
因此,StabilityAI在今年年初與HuggingFace等幾個初創公司一起資助了研究中心EleutherAI,而StableLM便建立在EleutherAI的開源模型上:
StableLM建立在我們與非營利性研究中心EleutherAI一起開源的早期語言模型基礎上,這些語言模型包括GPT-J、GPT-NeoX和Pythia等等。
此次大模型也是在ThePile開源的數據集上進行的訓練,該數據集結合了PubMed、StackExchange和維基百科等網站的的文本樣本,其規模是ThePile的三倍,包含1.5萬億個內容標記。
StabilityAI表示,正式因為這個豐富的數據集,盡管參數規模和GPT-3沒有可比性,但StableLM在交流和編程方面都展現了“驚人的高性能”:
盡管StableLM參數規模只有30億至70億,但性能非常好,下面是例子:
在這個例子里,StableLM回到了有關“對于從高中畢業的朋友你回說些什么?”以及“寫一封郵件”的請求。
在這個例子里要求該模型寫一個“計算生命意義的C語言程序”,但該模型表示無法完成此項任務,但寫了一個計算生命長度的程序。
Mostaque在Twitter上表示,他相信StableLM及其訓練數據會隨著時間而變得更好,沒有人知道這個模型可以被優化到什么程度:
我知道現在還有很長的路要走,這只是一個開始。我認為我們可以在接下來的3-6個月內讓該模型變得和StableDiffusion一樣有用,而在接下來的幾年里,發展將是驚人的。
OpenAI不夠Open,StabilityAI夠穩嗎
前不久,馬斯克批評OpenAI背離了開源、非盈利的初衷,這是OpenAI一直以來面臨的爭議,也是StabilityAI“暗戳戳”的諷刺OpenAI的要點。
盡管OpenAI不夠開放,但GPT-4無疑是當下最好用的大語言模型。而夠開放的StabilityAI,其語言模型StableLM夠穩嗎。
要知道,目前StableLM的Alpha版本擁有30億和70億參數,而GPT-3.5模型的參數量為2000億。
有網友稱,StabilityAI并沒有在公告上說明StableLM當前的局限性。
該模型是否存在與其他模型一樣傾向于編造事實?是否會經常答非所問?
媒體分析認為,該模型基于ThePile訓練,而ThePile數據集內存在大量不雅用語,因此對話過程可能會讓用戶不適。
還有網友表示,他嘗試在HuggingFace上測試這些模型,但每次都遇到“滿負荷”的問題,無法成功在前端上運行,這很可能與模型的大小及受歡迎的程度有關。
“大語言模型是否應該開源”也成了近期爭論的焦點。有研究人員認為,類似StableLM等開源模型的發布,很可能被用于,發送釣魚信息或協助惡意軟件攻擊等不良目的。
但StabilityAI認為,開源模型的出現可以協助研究人員識別潛在風險,并制定一些列保護措施。
StabilityAI的營收困境
更嚴重的問題是,StabilityAI或許正面臨營收困境。
最近有媒體報道稱,StabilityAI正在以驚人的速度燒錢,但卻沒有明確的盈利途徑。而且在競爭激烈的AI賽道,還面臨著一眾初創企業和科技巨頭的“圍剿”。
Meta此前發布開源大語言模型LLaMA,使得越來越多的公司有望在開源模型基礎上定制自己的大模型,人工智能也正在迎來“安卓時刻”。
StabilityAI現在正在尋找新的高管人才,希望他能在惡劣的條件下給公司帶來收入,以解決當前“瘋狂燒錢、營收可憐”的窘況。
去年底,StabilityAI宣布融資1.01億美元,并稱StableDiffusion已成為當前可用性最高的開源模型。
據《福布斯》的數據,每天約有有1000萬人使用?StableDiffusion——比使用OpenAI的DALL-E2的人數還要多。同時,StabilityAI還提供面向消費者的產品——DreamStudio,目前擁有來100萬名注冊用戶。
但訓練模型所需的計算資源和成本讓StabilityAI不得不探索新商業模式。Mostaque曾在Twitter上回復一位用戶時說:
“實際上,我們模型使用了256個A100顯卡,總共15萬小時,所以按市場價格計算為60萬美元。”
StabilityAI去年融到的1億美元至今已經“燒”掉大半。
還有一個不可忽略的事實是,其競爭對手Midjourney已經成為互聯網上事實上的圖像生成模型的領跑者,甚至一定程度上擊敗了OpenAI的DALL-E。
當前,有消息稱,StabilityAI正在謀求新一輪融資,希望能將公司的估值漲至40億美元。StabilityAI能否扭轉局面,籌集到足夠的資金來維持局面,還有待觀察。
?來源:元宇宙之心
Intro 2023年4月13日,以太坊計劃執行上海升級,海量質押ETH即將解鎖,其導致的極限拋壓究竟有多大?拋售行為又會持續多久?質押ETH提款須更新取款憑證以太坊上海升級將允許驗證者提取存入.
1900/1/1 0:00:00社區爭議不斷的Sui,還值得投資嗎? 撰文:Leo 從去年開始炒的Sui終于發幣了,二級市場比較關心Suitoken估值.
1900/1/1 0:00:00最近的香港格外熱鬧,大咖云集,人聲鼎沸,香港當地酒店價格幾乎是平時2-3倍,一些活動場地因為太火還被限制入內.
1900/1/1 0:00:00加密研究員Hoeem最近總結了一些加密億萬富翁和交易大佬在鏈上的活動,涉及杠桿交易、DeFi挖礦等。相關加密資產包括$GMX、$ARB、$SOLID、$EQUAL、$SNEK、$TRX等.
1900/1/1 0:00:0021:00-7:00關鍵詞:Shapella升級、HashkeyPro、OpenAI、FTX1.以太坊已完成Shapella升級;2.Aptos推出2000萬美元獎勵計劃.
1900/1/1 0:00:00在以太坊生態系統中,有多種策略可幫助ETH投資者實現睡后收入。本文總結了三種主要策略:經典質押、DeFi積木和DeFi期權金庫,以及它們的風險和回報.
1900/1/1 0:00:00