近期，馬斯克在自家的 X 平臺(tái)發(fā)布了 xAI 對(duì)標(biāo) OpenAI 旗下 ChatGPT 的產(chǎn)品 —— “Grok”，本文將聊聊xAI 的能力以及Muskonomics” 馬斯克經(jīng)濟(jì)學(xué)中的 AI 縱向一體化，一起來(lái)看看吧。

在剛剛過(guò)去的這個(gè)周末，馬斯克在自家的 X 平臺(tái)發(fā)布了 xAI 對(duì)標(biāo) OpenAI 旗下 ChatGPT 的產(chǎn)品 —— “Grok”，這篇內(nèi)容將聊聊 xAI 的能力，以及掰扯 “Muskonomics” 馬斯克經(jīng)濟(jì)學(xué)中的 AI 縱向一體化。

先來(lái)說(shuō)說(shuō)最新發(fā)布的 xAI “Grok”，這款聊天機(jī)器人具備以下能力：

實(shí)時(shí)知識(shí)庫(kù)接入：Grok 能夠?qū)崟r(shí)更新其知識(shí)庫(kù)，這意味著它能夠接入最新的信息，為用戶(hù)提供最新的數(shù)據(jù)和資訊，比如以加密貨幣 SBF 近期的案件報(bào)道詢(xún)問(wèn)：

敢于觸及敏感話(huà)題：與其他 AI 系統(tǒng)不同，Grok 能夠處理并回應(yīng)那些大多數(shù)AI系統(tǒng)會(huì)避免的敏感或“辣味”問(wèn)題，這表明了其在理解復(fù)雜話(huà)題和用戶(hù)意圖方面的先進(jìn)性；

快速迭代與成長(zhǎng)：盡管 Grok 僅僅訓(xùn)練了兩個(gè)月，但它承諾會(huì)根據(jù)用戶(hù)反饋進(jìn)行快速迭代，通過(guò)每周更新迅速成長(zhǎng)和改進(jìn)；

高效能的技術(shù)棧：Grok 由一個(gè)高效和穩(wěn)定的訓(xùn)練和推理堆棧支持，使用了 Kubernetes、Rust 和 JAX 等先進(jìn)技術(shù)。這些技術(shù)不僅確保了訓(xùn)練過(guò)程的可靠性，也提升了系統(tǒng)的性能和靈活性；

優(yōu)異的基準(zhǔn)測(cè)試表現(xiàn)：Grok 的核心引擎 Grok-1 在基準(zhǔn)測(cè)試中的表現(xiàn)超越了許多同級(jí)別的模型，包括 ChatGPT-3.5 和 Inflection-1，在編碼任務(wù)和多學(xué)科選擇題上的表現(xiàn)尤為出色；

未來(lái)的多模態(tài)能力：Grok 計(jì)劃未來(lái)將具備視覺(jué)和音頻等多模態(tài)能力，這將極大擴(kuò)展其應(yīng)用場(chǎng)景和互動(dòng)方式；

有趣的交互體驗(yàn)：Grok 在設(shè)計(jì)時(shí)融入了一種詼諧乃至叛逆的特質(zhì)，這使得與它的互動(dòng)更加生動(dòng)有趣，但也意味著對(duì)于特別敏感的用戶(hù)可能需要一些時(shí)間去適應(yīng)；

研究和創(chuàng)新的賦能者：xAI 團(tuán)隊(duì)希望 Grok 能夠成為研究者和創(chuàng)新者的強(qiáng)有力助手，無(wú)論是在快速訪(fǎng)問(wèn)信息、處理大量數(shù)據(jù)還是孵化新想法上，Grok 都有望發(fā)揮關(guān)鍵作用；

推理能力與魯棒性：xAI 正在努力提升 Grok 的推理能力，以克服當(dāng)前系統(tǒng)的局限性，提高對(duì)抗性攻擊的魯棒性，確保其在各種情境下都能做出可靠和準(zhǔn)確的推理；

那么”Grok”是什么意思呢？這個(gè)詞首次出現(xiàn)自 20 世紀(jì)科幻文學(xué)的“三巨頭”之一 Robert A. Heinlein 的代表作《異星奇客》(Stranger in a Strange Land) ，“Grok”的意思是理解某事物的本質(zhì)。

如何定义B端产品及B端产品经理方法论

相较于C端产品，B端产品最大的特点是：面向特定领域用户，且数量少得多，但更注重对用户专业领域操作流程的深度挖掘——也就是专业性更强，与业务的结合更紧密。

查看详情 >

在 Heinlein 的設(shè)定中，“Grok”是火星語(yǔ)言中一個(gè)非常豐富和復(fù)雜的概念，涵蓋了“飲水”這個(gè)物理動(dòng)作的同時(shí)，也隱含了人與宇宙的深層連接與理解，它涉及了一個(gè)生物體對(duì)另一個(gè)生物體或事物的全面感知、理解和同化。

“Grok”這個(gè)詞語(yǔ)隨著《異星奇客》的流行而進(jìn)入了現(xiàn)實(shí)世界，特別是在技術(shù)和黑客文化中，”Grok”常常用來(lái)表示某人徹底理解了一項(xiàng)技術(shù)或概念，這種理解不僅僅是表面的，而是透徹到了本質(zhì)。

除了《異星奇客》之外，你也能常?？吹今R斯克將英國(guó)作家 Douglas Adams 出品的《銀河系漫游指南》（The Hitchhiker’s Guide to the Galaxy）掛在嘴邊。

根據(jù)傳記作家 Issacson 的描述，這本馬斯克童年時(shí)代的啟蒙“圣經(jīng)”所記載的內(nèi)容與馬斯克的愿景使命相似，這本書(shū)中存在多種形式的 AI，很少有具有深度個(gè)性的 AI 角色，除了 Marvin 和Eddie。

Marvin 是一臺(tái)悲觀卻具備超強(qiáng)數(shù)學(xué)和邏輯能力的機(jī)器人，而 Eddie 是一臺(tái)樂(lè)觀開(kāi)朗且搭載在星艦飛船上的計(jì)算機(jī)，也許馬斯克在 SpaceX 的 Starship 上開(kāi)發(fā)了同款 AI 系統(tǒng)？

相信馬斯克在悲觀以及樂(lè)觀之間選擇了樂(lè)觀，就像他在過(guò)去采訪(fǎng)以及近期與英國(guó)首相蘇納克的對(duì)談中表示的那樣 ——“我認(rèn)為 AI 很有可能是一種積極的力量，但它出現(xiàn)問(wèn)題的概率不是 0%，所以我們只需要減輕潛在的風(fēng)險(xiǎn)”。

在與蘇納克對(duì)談中，馬斯克也談到了另一本科幻小說(shuō) Iain M. Banks的《The Culture》，這本書(shū)講述了一個(gè)高度發(fā)達(dá)、后稀缺經(jīng)濟(jì)的星際共同體—— The Culture。

這個(gè)共同體由各種不同的人類(lèi)、外星生物以及極為先進(jìn)的 AI 共同組成，這些 AI 經(jīng)常存在于大型的星艦和空間站中，它們擁有極其發(fā)達(dá)的智能和自主意識(shí)，通常是文明中的決策者，所以結(jié)合“AI、星艦、火星、人類(lèi)以及外星人”，你的腦海中會(huì)勾勒出什么樣的畫(huà)面呢？

回到 xAI，馬斯克也在 X 上表示在即將到來(lái)的 Beta 版本上，所有訂閱 X Premium 付費(fèi)訂閱用戶(hù)都將體驗(yàn)到 Grok 這款產(chǎn)品。

數(shù)據(jù)是 AI 的燃料。都知道馬斯克早期接連從 Deepmind 以及 OpenAI 兩家公司失利，以及與 Google 和 Microsoft 的恩怨情仇，擁有或遏制這幾家數(shù)據(jù)以及 AI 的發(fā)展至關(guān)重要，無(wú)論是在公開(kāi)場(chǎng)合警示 AI 的風(fēng)險(xiǎn)以及戲劇化的收購(gòu) Twitter，我想不僅有真實(shí)的需要，也有潛在的對(duì)于數(shù)據(jù)資產(chǎn)的布局。

Grok 底層是一個(gè)能實(shí)時(shí)能訪(fǎng)問(wèn) X 平臺(tái)的 AI 模型，根據(jù)《埃隆·馬斯克傳》的描述，X 平臺(tái)上的信息流在多年來(lái)發(fā)布超過(guò) 10000 億條，每天增加 5 億條，這里匯聚了來(lái)自全球的人類(lèi)集體思維，是世界上最及時(shí)的真實(shí)人類(lèi)對(duì)話(huà)、新聞、興趣、趨勢(shì)、爭(zhēng)論和行話(huà)的數(shù)據(jù)集。

在馬斯克收購(gòu)以前，X 采取寬松的政策讓 Google 以及 Microsoft 使用這些數(shù)據(jù)，而在被私有化后，馬斯克能夠限制這些大廠(chǎng)對(duì)于這個(gè)寶貴數(shù)據(jù)集的開(kāi)發(fā)，馬斯克在 7 月 xAI 全員動(dòng)員大會(huì)上的原話(huà) —— “我認(rèn)為每個(gè)從事 AI 的大大小小的AI組織，都在非法地使用 Twitter 的數(shù)據(jù)進(jìn)行訓(xùn)練，所以我們之前對(duì)請(qǐng)求進(jìn)行了限制”。

在此之后，xAI 對(duì)于 Grok 的訓(xùn)練也將擁有獨(dú)一無(wú)二的高質(zhì)量數(shù)據(jù)源，并且是持續(xù)實(shí)時(shí)的。但是，作為一款對(duì)標(biāo) ChatGPT 的競(jìng)品，這只是馬斯克對(duì) xAI 的第 2 個(gè)目標(biāo)。

在早之前的 4 月，馬斯克就向 xAI 骨干成員 Babuschkin 以及團(tuán)隊(duì)其它成員提出 xAI 的 3 大目標(biāo)：

• 開(kāi)發(fā)一款能夠編寫(xiě)程序的 AI；
• 開(kāi)發(fā)一款 ChatGPT 的競(jìng)品；
• 成為一款具備相信真理、具備推理和思考能力的 AGI；

再次來(lái)到 7 月的 xAI 全員動(dòng)員大會(huì)，馬斯克也是秉持“Build in Public”的理念，公開(kāi)討論了 xAI 的第三大目標(biāo) —— AGI，馬斯克的愿景是 AI 能夠理解宇宙的真實(shí)本質(zhì)，從物理學(xué)的視角探討了一些關(guān)于宇宙的未解之謎，例如外星人的存在和重力的本質(zhì)等。

為什么馬斯克一直強(qiáng)調(diào)物理學(xué)，并且像 Igor Babuschkin 這樣的核心技術(shù)骨干都具有物理學(xué)背景呢？馬斯克曾引用《2001太空漫游》的例子：

Hal 9000是科幻電影《2001太空漫游》中的虛構(gòu)角色，Hal 9000是一臺(tái) AI 超級(jí)計(jì)算機(jī)，被安裝在太空船 Discovery One 上，負(fù)責(zé)船上的自動(dòng)操作和與宇航員的交互，在電影中，Hal 9000 逐漸表現(xiàn)出異常的行為，包括誤導(dǎo)宇航員、隱藏真相和威脅船員的生命，這引發(fā)了劇情中的緊張和沖突，成為電影的重要元素之一。

對(duì)此，馬斯克表示不要讓 AI 面對(duì)不可能的目標(biāo)，不要強(qiáng)迫 AI 撒謊，而物理學(xué)是真實(shí)的，實(shí)際上我們無(wú)法顛倒它，物理學(xué)不會(huì)說(shuō)假話(huà)，它要么是物理學(xué)，要么不是物理學(xué)，反而人類(lèi)堅(jiān)持強(qiáng)烈的現(xiàn)實(shí)，到最后可能發(fā)現(xiàn)那實(shí)際上是虛假的。

以上只是“軟”的層面，“硬”的層面其實(shí) Walter Issacson 在《埃隆·馬斯克傳》也提到， Issacson 認(rèn)為特斯拉的全自動(dòng)駕駛與通過(guò)處理視頻信息使用 Dojo 技術(shù)的 Optimus 機(jī)器人相結(jié)合的真實(shí)世界 AI 將會(huì)比 LLM 的生成式 AI 更加重要。

馬斯克眼中的“AI”并非我們今天在討論的 LLM、ChatBot 或者 Robot，而是非常廣泛所有由計(jì)算機(jī)控制的東西，比如馬斯克認(rèn)為特斯拉汽車(chē)實(shí)際上是有輪子的機(jī)器人，而任何連接到互聯(lián)網(wǎng)的東西實(shí)際上都是 AI 的端點(diǎn)執(zhí)行器。

在 Infra 層面，除了上層的數(shù)據(jù)源 X 以及端到端的模型&ChatBot —— Grok，更底層的是 AI 所需的算力，而這部分指責(zé)則由馬斯克的特斯拉正在加速研發(fā)的 Dojo 來(lái)承擔(dān)。

Dojo 除了在 ChatBot 今天看到的生成式 AI 產(chǎn)品發(fā)揮作用，也能用于優(yōu)化特斯拉電動(dòng)汽車(chē)的電池，以及商業(yè)航天領(lǐng)域：摩根士丹利的分析師認(rèn)為，SpaceX 的數(shù)千顆衛(wèi)星可以通過(guò) ISL 相互通信，無(wú)需中間地面段來(lái)中繼數(shù)據(jù)。

另外，衛(wèi)星的運(yùn)行需要避免碰撞的軌道碎片，這背后需要大量的算力，而其中所需的計(jì)量法可以受益于 Al 計(jì)算，與 Dojo 可以用于自主駕駛以避免障礙物并創(chuàng)建計(jì)劃路徑的方式相同，Spacex可以使用 Dojo 來(lái)訓(xùn)練其系統(tǒng)以進(jìn)行通信和避免碎片碰撞。

根據(jù) 2023 年 6 月馬斯克的推文，Dojo V1 已經(jīng)針對(duì)大量的視頻訓(xùn)練進(jìn)行了高度優(yōu)化，而 Dojo V2 將整合 V1 目前面臨的任何通用 AI 限制；特斯拉認(rèn)為，下一代V2 的開(kāi)發(fā)和實(shí)施可以實(shí)現(xiàn)高達(dá) 10 倍的性能提升，從而使公司能夠在 2024 年第四季度達(dá)到 100 exaFLOP。

馬斯克表示早期的 Dojo 是關(guān)于訓(xùn)練的，但并不是用來(lái)運(yùn)行 LLMs 的，但在圖像方面 Dojo 做得很好，之后將迭代到高效運(yùn)行 LLM 以及其他形式的 AI 訓(xùn)練，未來(lái)有望曾為一種潛在的可出售服務(wù)，類(lèi)似亞馬遜的云服務(wù)。

在摩根士丹利的報(bào)告中，截至去年 9 月，特斯拉擁有 3 臺(tái)超級(jí)計(jì)算機(jī)，總共配備了 14000 個(gè)英偉達(dá) A100，其中 10000 個(gè)用于訓(xùn)練，4000 個(gè)用于自動(dòng)標(biāo)注，而特斯拉最大的超級(jí)計(jì)算機(jī)系統(tǒng)配備了 7360 個(gè)A100，如果按 GPU 數(shù)量計(jì)算，這將使其成為全球第 7 大超級(jí)計(jì)算機(jī)。

此外，馬斯克有明確表示特斯拉不生產(chǎn) GPU，但是這些定制芯片 D1 的算力等效 GPU，例如 H100 等等，而特斯拉設(shè)計(jì)的核心是車(chē)載硬件套件 Hardware （包含攝像頭和多個(gè)傳感器），Hardware 將承擔(dān)推理任務(wù)，尤其是每天車(chē)輛出行決策中的數(shù)十億查詢(xún)量時(shí)，高效的推理非常重要。

進(jìn)一步往下的是，這個(gè)量級(jí)的推理并不能通過(guò)純資本來(lái)解決，馬斯克認(rèn)為這需要電力能源的承擔(dān)，需要降壓變壓器，而在兩年后，世界可能因?yàn)?AI 訓(xùn)練開(kāi)始出現(xiàn)電力能源的緊缺問(wèn)題。

在節(jié)能方面，摩根士坦利分析師 Jonas 也曾在報(bào)告中提到 D1 芯片將使特斯拉更多地控制其用于運(yùn)行 AI 軟件的能源消耗，且能夠比使用英偉達(dá)芯片更快地處理視頻數(shù)據(jù)。

除了節(jié)能，芯片制造成本也是發(fā)揮著 Gigafactory 的理念，與當(dāng)前的替代方案相比，特斯拉預(yù)計(jì) Dojo 在性能方面將提供 4 倍提升，在性能/瓦特方面將提供 1.3 倍的提升，并且在占地面積方面將縮小 5.0 倍。

換句話(huà)說(shuō)，特斯拉可以在 4 個(gè) Dojo 機(jī)柜上實(shí)現(xiàn)與使用 4000 個(gè) GPU 相同的吞吐量，關(guān)于這點(diǎn)，iPhone 的包裝設(shè)計(jì)與物流運(yùn)輸也要直呼“內(nèi)行”。此外，通過(guò)使用較少的系統(tǒng)，而不是當(dāng)前的 A100 集群，超級(jí)計(jì)算機(jī)可以更有效地冷卻。

最后，關(guān)于競(jìng)爭(zhēng)優(yōu)勢(shì)，在馬斯克看來(lái)真正的競(jìng)爭(zhēng)優(yōu)勢(shì)在于你創(chuàng)新低速度，而不是任何但一定創(chuàng)新，事實(shí)上 SpaceX 幾乎沒(méi)有專(zhuān)利，特斯拉開(kāi)放專(zhuān)利讓更多人免費(fèi)使用，只要?jiǎng)?chuàng)新的速度足夠快，那就是對(duì)抗競(jìng)爭(zhēng)的真正防線(xiàn)，而不是拼接專(zhuān)利或者隱藏某些東西。

Reference：

• https://mp.weixin.qq.com/s/DO6IUnz93HW3cL_2XXQEUA
• https://mp.weixin.qq.com/s/giOnkfCug5AeUWfC_nQM_Ahttps://mp.weixin.qq.com/s/I-cvIl3gBwnxrcw3NisMeA
• https://mp.weixin.qq.com/s/jelkq7Q2kfLPZZlXfuCa2A
• https://mp.weixin.qq.com/s/3HQC23etnVJ6PLPw3PeHgw
• https://mp.weixin.qq.com/s/_9wJK68c7-pd-7BiM7VlxA