中國AI企業(yè)月之暗面旗下的Kimi再次成為全球科技界焦點(diǎn)。其發(fā)布的《Attention Residuals》技術(shù)報告提出對深度學(xué)習(xí)核心架構(gòu)的創(chuàng)新性改造，在Twitter引發(fā)持續(xù)三天的熱議，主貼閱讀量突破460萬次。這項突破性成果不僅獲得OpenAI前研究副總裁Jerry Tworek"深度學(xué)習(xí)2.0"的高度評價，更贏得馬斯克"令人印象深刻"的公開稱贊，雙方在社交平臺的互動折射出中外AI技術(shù)的深度共鳴。

傳統(tǒng)殘差連接結(jié)構(gòu)自2015年ResNet論文問世以來，始終是支撐大模型訓(xùn)練的基石技術(shù)。該機(jī)制通過將每層輸出與輸入相加的方式，確保信息在深層網(wǎng)絡(luò)中有效傳遞。但隨著模型規(guī)模擴(kuò)張，這種"無差別累加"的缺陷日益凸顯：重要信息被稀釋、計算效率降低、訓(xùn)練穩(wěn)定性下降。Kimi團(tuán)隊提出的注意力殘差方案，創(chuàng)造性地引入動態(tài)注意力機(jī)制，使模型能夠自主篩選關(guān)鍵信息，實(shí)現(xiàn)1.25倍的訓(xùn)練效率提升。

在英偉達(dá)GTC 2026大會上，創(chuàng)始人楊植麟以《How We Scaled Kimi K2.5》為題，系統(tǒng)闡釋了技術(shù)突破背后的戰(zhàn)略思考。他指出當(dāng)前行業(yè)普遍使用的優(yōu)化器、注意力機(jī)制等底層技術(shù)，本質(zhì)上是八九年前的產(chǎn)物，已逐漸成為智能升級的瓶頸。Kimi通過重構(gòu)三大基石技術(shù)構(gòu)建完整創(chuàng)新閉環(huán)：MuonClip優(yōu)化器將計算效率提升至傳統(tǒng)方法的2倍；Kimi Linear混合架構(gòu)使長文本解碼速度提升5-6倍；注意力殘差方案則突破信息傳遞的固有局限。

技術(shù)突破帶來的商業(yè)價值正在顯現(xiàn)。作為全球用戶量最大的AI編程平臺Cursor和獨(dú)立搜索服務(wù)商Perplexity唯一接入的中國開源模型，K2.5憑借90%性能、七分之一價格的競爭優(yōu)勢，在海外實(shí)現(xiàn)20天收入超2025全年。其API平臺日均訪問量激增10-20倍，海外收入占比反超國內(nèi)市場。資本市場的追捧更具說服力，近三個月估值暴漲4倍，融資規(guī)模超過多數(shù)同行IPO募資額。

楊植麟在演講中特別強(qiáng)調(diào)，Kimi的野心不止于打造更優(yōu)秀的模型，而是要定義下一代架構(gòu)標(biāo)準(zhǔn)。他提出的智能體集群進(jìn)化預(yù)判，已通過Orchestrator機(jī)制實(shí)現(xiàn)初步驗證——該系統(tǒng)可將復(fù)雜任務(wù)拆解為數(shù)十個子任務(wù)并行處理，形成自協(xié)調(diào)的群體智能。這種從底層技術(shù)到應(yīng)用場景的完整創(chuàng)新體系，標(biāo)志著中國AI企業(yè)正式躋身全球技術(shù)規(guī)則制定者行列。

支撐這場技術(shù)革命的，是研究范式的根本轉(zhuǎn)變。楊植麟指出，十年前受限于算力資源，研究者難以通過規(guī)?；瘜?shí)驗驗證設(shè)想。如今"縮放階梯"的成熟，使得嚴(yán)謹(jǐn)?shù)囊?guī)?；炞C成為可能。Kimi團(tuán)隊正是通過這種系統(tǒng)性實(shí)驗方法，在優(yōu)化器、注意力機(jī)制等傳統(tǒng)領(lǐng)域挖掘出突破性創(chuàng)新，為全球AI發(fā)展開辟了新的技術(shù)路徑。