ASI從云端降臨終端 放大新智產(chǎn)業(yè)鏈規(guī)模效應(yīng)

ASI從云端降臨終端放大新智產(chǎn)業(yè)鏈規(guī)模效應(yīng)新智元創(chuàng)始人

楊靜目錄2024全球人工智能產(chǎn)業(yè)鏈洞察ASI放大新智產(chǎn)業(yè)鏈規(guī)模效應(yīng)從云端降臨終端，走向ASI新天地2024全球人工智能產(chǎn)業(yè)鏈洞察2024全球人工智能產(chǎn)業(yè)鏈洞察ScalingLaws>Moore'slaw LLM的能力提升大部分來自于算力，而摩爾定律代表著硬件算力的發(fā)展MIT的研究報(bào)告發(fā)現(xiàn)——LLM的性能大約每8個月就會翻一倍，速度遠(yuǎn)超摩爾定律（兩年翻一倍）2024全球人工智能產(chǎn)業(yè)鏈洞察Gemini

Ultra的開發(fā)成本估計(jì)為1.91億美元，GPT-4的開發(fā)成本估計(jì)為7800萬美元5年來排名前15的企業(yè)（大學(xué)）研發(fā)了近150個基礎(chǔ)大模型，按平均1億美元的開發(fā)訓(xùn)練成本計(jì)算，投入已超過150億美元2024全球人工智能產(chǎn)業(yè)鏈洞察星際之門：微軟和OpenAI

將耗資1000億美元，2028年推出AI超算Stargate馬斯克訓(xùn)練Grok-2用了2萬塊英偉達(dá)H100，而Grok-3及其后續(xù)版本的AI模型將需要多達(dá)10萬塊的同型號芯片馬斯克旗下xAI

2025年將投入近100億美元購買30萬塊B200。這個革命性的超算中心算力相當(dāng)于60萬塊H100Meta將在2024年購買約35萬塊H100，屆時Meta將擁有近60萬GPU儲備萬億美元—萬卡級登月競賽大模型大玩家——微軟+Meta兩大巨頭和10家萬卡追隨者全球2023年軍事支出創(chuàng)10多年來最大漲幅，創(chuàng)2.4兆美元空前新高元1.美國 9160億美元 2.中國2960億 美3.俄羅斯1090億美元 4.印度 836億 美元阿波羅登月計(jì)劃1961-1972約11年，總成本為250億美元，換算成現(xiàn)在的金額為1500億美元美國沖擊AGI成本至少超1萬億美元ASI宇宙算力能源大模型即系統(tǒng)生態(tài)資金人才投入2029，奇點(diǎn)臨近？——ASI登月競賽的時間線馬斯克：xAI目標(biāo)6年內(nèi)實(shí)現(xiàn)AGI,2029年或2030年，數(shù)字智能可能超過所有人類智能的總和黃仁勛：能通過人類測試的計(jì)算機(jī)，5年內(nèi)實(shí)現(xiàn)。更高則更難奧特曼：4-5年DeepMind創(chuàng)始人Demis

Hassabis一個具有普遍能力的系統(tǒng)，能夠完成人類所能做的幾乎所有的認(rèn)知任務(wù)，2030年實(shí)現(xiàn)扎克伯格：能源將成為瓶頸，AGI最終實(shí)現(xiàn)可能需要幾十年時間2030年，全球數(shù)據(jù)中心的用電量將超過全球人口最多的國家印度24年6月20日，排名前6的美國科技公司總市值超15萬億美元，而排名前20的中國大陸科技公司總市值不到1.4萬億美元（Top3市值≈中國A股總市值）從AGI到ASI，指數(shù)級加速地球從AGI向ASI進(jìn)化，所有財(cái)富和資源配置將指數(shù)級加速流向頭部壟斷生態(tài)群，低維生態(tài)將被快速抽干，片甲不留直至清0。自ChatGPT推出以來，英偉達(dá)的市值已增長8倍，達(dá)到3.2萬億美元，并在6月5日一度超越蘋果，成為全球第二大市值公司。ASI——萬眾臣服

GPU鐵王座ASI星球大戰(zhàn)的產(chǎn)業(yè)鏈集聚效應(yīng)Sora橫空出世：大模型向多模態(tài)橫跳，算力和數(shù)據(jù)需求指數(shù)級劇增約需72萬塊英偉達(dá)H100

才能大規(guī)模運(yùn)行類似

Sora

的模型，這意味著人工智能生成的視頻已經(jīng)在TikTok和YouTube等流行視頻平臺上實(shí)現(xiàn)顯著的市場滲透中金公司測算：訓(xùn)練側(cè)來看，Sora的算力成本理論計(jì)算值約為GPT-4的10倍，推理側(cè)來看，Sora的算力成本理論計(jì)算值高達(dá)約GPT-4的2000倍GPT-4訓(xùn)練用了2.5萬塊A100如果平臺大規(guī)模運(yùn)行類似Sora的模型，可能需要大約70萬塊H100。預(yù)估費(fèi)用超過210億美元天文數(shù)字的合成數(shù)據(jù)將成為未來大模型訓(xùn)練的核動力若基于現(xiàn)實(shí)世界數(shù)據(jù)訓(xùn)練，Sora使用的數(shù)據(jù)量可能多達(dá)每分鐘百萬token級別微軟可能給OpenAI提供了5000億視頻用于Sora訓(xùn)練。Sora的API接口開放后，將有更多海量數(shù)據(jù)涌入，又有更多視頻生成天文數(shù)字的合成數(shù)據(jù)將成為未來大模型訓(xùn)練的核動力根據(jù)

Gartner

的預(yù)測，2024年用于訓(xùn)練大模型的數(shù)據(jù)中有60%將是合成數(shù)據(jù)到

2030

年大模型使用的絕大部分?jǐn)?shù)據(jù)將由人工智能合成最優(yōu)異的大模型能合成最高質(zhì)量的訓(xùn)練用數(shù)據(jù)屆時超人類智能使用的數(shù)據(jù)將由AGI自我合成OpenAI的GPT-5面臨10萬億到20萬億tokens的數(shù)據(jù)短缺Epoch研究所的AI研究員Pablo

Villalobos估計(jì)，GPT-4訓(xùn)練涉及的數(shù)據(jù)量高達(dá)12萬億tokens，而未來模型，如GPT-5，可能需要60萬億到100萬億tokensOpenAI目前每天能創(chuàng)造出約1000億字的內(nèi)容，而全世界的人類每天總共能產(chǎn)生約100萬億字只有合成數(shù)據(jù)才是未來：AI醫(yī)療與AI金融的超級武器Nemotron-4

340B

模型支持4K上下文窗口、50多種自然語言和40多種編程語言，訓(xùn)練數(shù)據(jù)截止到2023年6月。訓(xùn)練數(shù)據(jù)方面，英偉達(dá)采用了高達(dá)9萬億個token。其中，8萬億用于預(yù)訓(xùn)練，1萬億用于繼續(xù)訓(xùn)練以提高質(zhì)量。指令模型的訓(xùn)練是在98%的合成數(shù)據(jù)上完成的。Nemotron-4

340B對各行業(yè)的潛在影響是巨大的。在醫(yī)療領(lǐng)域，如果能生成高質(zhì)量合成數(shù)據(jù)，可能會帶來藥物發(fā)現(xiàn)、個性化醫(yī)療和醫(yī)學(xué)影像方面的突破。在金融領(lǐng)域，基于合成數(shù)據(jù)訓(xùn)練的定制大語言模型，則可能會徹底改變欺詐檢測、風(fēng)險(xiǎn)評估和客戶服務(wù)。在制造業(yè)和零售業(yè)方面，特定領(lǐng)域的LLM可以實(shí)現(xiàn)預(yù)測性維護(hù)、供應(yīng)鏈優(yōu)化和個性化客戶體驗(yàn)。。ASI放大 新智產(chǎn)業(yè)鏈規(guī)模效應(yīng)夏語冰小冰擅長中國畫。還具備文本創(chuàng)作AYAYI燃麥科技超寫實(shí)數(shù)字人洛天依嗶哩嗶哩中國內(nèi)地女虛擬歌手翎次世文化超寫實(shí)國風(fēng)虛擬原創(chuàng)IP觀君小冰愛加科大訊飛虛擬主持人，擔(dān)任2021兩會虛擬助手小諍騰訊自由滑雪虛擬教

全球首位數(shù)字航練、測試賽裁判

天員，數(shù)字記者M(jìn)姐魔琺科技?xì)W萊雅品牌虛擬代言人虛擬IP 虛擬助手 虛擬分身Siren騰訊通過實(shí)時捕捉、實(shí)時渲染生成動作和語言，用于拍攝或場景仿真。小K直播姬云舶科技全棧式無穿戴虛擬直播產(chǎn)品，虛擬鄧麗君數(shù)字王國2022年1月1日,南京與周深同臺演唱數(shù)字新人類涌現(xiàn)：視覺生成，人機(jī)交互技術(shù)全面提升目前，虛擬人從1.0時代進(jìn)入了虛擬人3.0

時代，虛擬技術(shù)從語音合成、實(shí)時動捕發(fā)展到機(jī)器學(xué)習(xí)驅(qū)動口型、表情、動作等，構(gòu)建對話庫與人進(jìn)行互動，成本降低，交互能力增強(qiáng)。按照功能劃分，數(shù)字新人類可分為虛擬IP型、虛擬助手型、虛擬分身型?！?023十大人形機(jī)器人】黃仁勛認(rèn)為，AI將在數(shù)據(jù)中心、機(jī)器人/自動駕駛、生命科學(xué)這三個領(lǐng)域帶來革命性影響。在不久的將來，人形機(jī)器人有望成為大眾化設(shè)備，制造成本有望大大低于人們的預(yù)期，售價(jià)可能不會超過1萬-2萬美元。另外，在一些環(huán)境下，機(jī)器人可能更敏捷、更多才多藝，且有望提高生產(chǎn)力。2023年中國百模大戰(zhàn)誰占鰲頭？2023年中國百模大戰(zhàn)誰占鰲頭？大模型在智能與知識測試中全面超越人類，技術(shù)自主創(chuàng)新與用戶場景革命同步2017年谷歌的論文「Attentionis

All

You

Need」提出注意力機(jī)制，讓我們探索到了Transformer這種「萬能架構(gòu)」，加上日益增長的算力，BERT、GPT、DALL·E等更大更強(qiáng)的模型應(yīng)運(yùn)而生，能夠生成質(zhì)量上乘的語言和圖像。在各種基準(zhǔn)測試中，模型達(dá)到甚至超越人類水平的速度越來越快。大模型在智能與知識測試中全面超越人類，技術(shù)自主創(chuàng)新與用戶場景革命同步紅杉把生成式AI應(yīng)用程序看作“小腦”，支撐它運(yùn)行的底層大型通用AI模型是“大腦”。紅杉推測到2030年生成式AI將達(dá)到專家級創(chuàng)作者，屆時包括程序員、圖形設(shè)計(jì)師、視頻直播等崗位將更多被AI取代。AI的iPhone時刻將出現(xiàn)應(yīng)用的大爆發(fā)。未來新天地中領(lǐng)航新人類AI伙伴

從知識到智識的革新埃森哲

2024技術(shù)展望報(bào)告智能體

AI互聯(lián)的生態(tài)系統(tǒng)埃森哲

2024技術(shù)展望報(bào)告AI

CITY——

每家公司都可以擁有自己的AI

SpaceAI

原住民——

每個人都可以擁有n個AI智能體從云端降臨終端，走向ASI新天地AI創(chuàng)業(yè)：三分天下，大局已定大模型與AIGC：新四小龍ASI

宇宙數(shù)據(jù)算力能源資金人才投入PMF+終端為王0成本ASIASI從云端降臨終端——

手搓大模型，智能調(diào)用生成式云平臺ASI從云端降臨終端——未來不可想象！三個哈佛學(xué)生手搓Thansformer專用芯片，一張Sohu=20張H100斯坦福天才少女團(tuán)隊(duì)手搓P(guān)ika，一年締造5億美元獨(dú)角獸馬毅教授學(xué)生，NYU博士一