AI 趨勢日報:2026-05-10

ALIBABABAIDUCOMMUNITYGITHUBGOOGLEMEDIANVIDIAOPENAI
GPT-5.5 Pro 在數學前沿刷新認知、12GB 顯卡突破本地推理瓶頸、情緒 AI 悄然入侵職場——AI 正在同一天內同時穿越研究、硬體與倫理三條邊界。

重磅頭條

OPENAI技術

Fields 獎得主實測 ChatGPT 5.5 Pro:不到兩小時產出「博士級」數學研究

Timothy Gowers 以零提示工程驗證 LLM 已能自主推進數學知識邊界

發布日期2026-05-10
主要來源Gowers's Weblog
補充連結The Decoder - 外媒報導摘要,提供 Gowers 實驗第三方視角與 Rajagopal 評語
補充連結SiliconANGLE:OpenAI releases GPT-5.5 - GPT-5.5 發布背景,主打強化數學與程式碼生成能力
補充連結Hacker News 討論串 - 社群對 Gowers 實驗的第一手反應,含成本疑慮與能力邊界討論

重點摘要

Fields 獎得主親測:LLM 已能在兩小時內獨立完成博士級數論研究

技術

ChatGPT 5.5 Pro 在 17 分鐘內將 Nathanson 的指數界改良為多項式界,核心技術組合被 MIT 研究員認定「完全原創」,具備真實研究突破的技術含量。

成本

模型消耗 token 速度極快,高訂閱成本已形成研究資源不平等——高價 AI 的可及性正成為影響研究能力的新學術門檻。

落地

學術界對 AI 貢獻的著作權與學術信用認定尚無共識,加上進階領域仍存在能力邊界,目前適合「AI 輔助研究」模式而非完全自主替代。

前情提要

章節一:Timothy Gowers 的實驗設計——讓 LLM 挑戰開放數學問題

Timothy Gowers 是 1998 年 Fields 獎得主、法蘭西公學院組合數學講席教授,以對 Ramsey 理論與 Banach 空間問題的貢獻著稱於學界。2026 年 5 月 8 日,他在個人部落格記錄了一次罕見的第一手實驗:以數論學家 Mel Nathanson 在 arXiv:2603.15556 中提出的開放問題為起點,讓 ChatGPT 5.5 Pro 在幾乎零人工介入的條件下嘗試解題。

Gowers 刻意不給模型任何數學提示,自述「連提示詞也沒有做任何聰明的事」,並坦承個人數學貢獻「歸零」。這種極簡設計讓實驗成為盡可能乾淨的基準測試:若成果成立,功勞幾乎完全屬於模型本身,而非人機協作的合力產物。

章節二:「博士級」成果的具體內容與學界反應

研究對象是 N(h,k)——使 k 元素集合能實現所有 h 重和集大小所需最小「直徑」的界。Nathanson 原有指數界,模型在 17 分 5 秒內將其改良為最優二次多項式界;隨後延伸至 MIT 研究員 Isaac Rajagopal 的廣義問題,最終完成多項式界 N(h,k) ≤ O(k^(10h³)) 。

名詞解釋
N(h,k) :數論中衡量「k 元素集合需要跨越多大的數值範圍,才能涵蓋所有 h 重和集大小」的組合量。從指數界縮小到多項式界,是複雜度意義上的本質性改善,而非邊際調整。

模型採用的核心技術組合頗為罕見:h²-dissociated set、Singer(1938) 及 Bose-Chowla(1963) 的有限域方法,以「反直覺」方式將幾何級數的指數增長壓縮進多項式大小區間。Rajagopal 稱這個核心想法「完全原創」,換成人類數學家需要數週才可能得出。Gowers 最終評定成果達「博士論文章節等級」。

名詞解釋
h²-dissociated set:組合數學構造,具特殊加法獨立性質——集合中任意 h² 個不同元素的線性組合均不重疊,使多重和集大小的精確估計成為可能。

章節三:數學研究的 AI 輔助——從計算工具到研究夥伴的質變

過去,AI 在數學領域的角色主要是符號計算(如 Mathematica)或形式驗證(如 Lean)。ChatGPT 5.5 Pro 在此實驗中展現的是截然不同的能力:從問題理解、策略選擇到證明構造,模型全程主動推進研究議程,而非被動執行人類指令。

The Decoder 報導指出更宏觀的背景:2026 年初以來,已有 15 道 Erdős 懸案從「開放」轉為「已解決」,其中 11 道明確由 AI 模型協助完成。多位數學家預測,2026 年將是 AI 貢獻首次通過主流數學期刊同儕審查的元年,標誌著 AI 數學工具從「加速計算」到「推進知識邊界」的質變。

章節四:LLM 數學推理能力的邊界與未來展望

樂觀情緒之外,社群也提出幾個值得關注的邊界。其一是成本:模型「以瘋狂速度消耗 token」,高成本使大規模多 agent 數學研究仍面臨現實門檻。其二是能力邊界:有物理學家指出,LLM 在 Clifford 代數等進階領域仍常犯「概念性錯誤」,宜視為「需要導師的高效學生」而非自主研究者。

Gowers 也特別點出資源不平等隱憂:能否取用高價 AI 模型,已成為影響研究能力的新門檻。更深層的學術倫理問題隨之浮現:若數學家在「與 LLM 的長時間對話」中扮演引導角色,其成果是否仍算個人學術貢獻?傳統數學中「透過親自解題獲得洞察」的核心價值將如何重新定義?

核心技術深挖

ChatGPT 5.5 Pro 在 Gowers 實驗中展現的數學突破,源自三種技術機制的協同運作:問題自主分解能力、跨時代文獻知識整合、以及「反直覺」組合策略的生成。

機制 1:問題的自主分解與層次化推進

模型收到 Nathanson 的開放問題後,主動識別問題結構——將 N(h,k) 的界分成「小和集」和「大和集」兩個子問題分別處理。這種層次化分解是人類數學家的慣用策略,但模型在零提示的條件下自主應用,顯示出對問題拓撲的隱性理解,而非簡單的模式匹配。

機制 2:跨時代文獻知識的有機整合

模型自主調用 Singer(1938) 和 Bose-Chowla(1963) 的有限域構造方法,並與 h²-dissociated set 的現代組合工具結合。這種橫跨 80 年數學文獻的整合,在人類研究者中需要廣博的文獻積累;模型將其壓縮為推理過程中的即時調用,且應用脈絡被領域專家認定為合理而非生硬套用。

機制 3:「反直覺」策略——將指數增長壓縮進多項式框架

最關鍵的技術突破在於:模型找到以等差數列控制小和集、以幾何級數類比 G/H 控制大和集,並透過跨多區間的參數變化策略,將原本指數級的增長壓縮進多項式大小區間,同時保留必要的組合性質。Rajagopal 稱這個核心想法「完全原創」,換成人類數學家需要數週才可能得出。

白話比喻
想像你要用繩子圍出一個形狀,原本只知道需要「指數多」的材料,但模型找到了一種精巧的摺疊方式,讓同樣的效果只需要「多項式多」的材料——這不是近似,而是精確的數學等價,且方法本身是全新的。

工程視角

環境需求

ChatGPT 5.5 Pro 目前僅透過 OpenAI 付費訂閱存取,無開源替代方案。API 層面需特別注意 token 消耗速度極快,建議在批次數學研究任務前設置 token budget 上限,並監控每輪對話費用累積。

最小 PoC

import openai

client = openai.OpenAI()

response = client.chat.completions.create(
    model="gpt-5.5-pro",
    messages=[{
        "role": "user",
        "content": "[在此貼入問題陳述] Please find an improved bound, showing all steps."
    }],
    max_tokens=8192
)
print(response.choices[0].message.content)

驗測規劃

數學輸出的驗測需要領域專家逐步審查:

  1. 確認每個推理步驟的邏輯正確性(不可僅依賴模型自我宣稱)
  2. 驗證關鍵引理引用的準確性(Singer 1938、Bose-Chowla 1963 等)
  3. 以形式化工具(如 Lean 4)對核心斷言進行機器驗證

常見陷阱

  • 模型可能以高度自信的語氣輸出含有微妙錯誤的證明,難以直接察覺
  • 長對話 token 消耗快速攀升,建議按研究子問題切割對話階段
  • 在 Clifford 代數等進階領域,模型已知有概念性錯誤的紀錄

上線檢核清單

  • 觀測:每輪對話 token 用量、推理完成時間
  • 成本:API 費用監控,建議設置每日/每任務上限
  • 風險:所有數學斷言經人工或形式化工具驗證後才可引用於正式文件

商業視角

競爭版圖

  • 直接競品:Google Gemini Ultra(數學推理)、Anthropic Claude Opus(長上下文推理)、DeepSeek-R1(開源數學推理,可本地部署)
  • 間接競品:Wolfram Alpha(符號計算)、Lean/Coq(形式化驗證)、Mathematica(數值與符號計算)

護城河類型

  • 工程護城河:GPT-5.5 Pro 在 Gowers 實驗中展現的跨時代文獻整合與「反直覺」組合策略生成,目前尚無可對比的公開基準
  • 生態護城河:Fields 獎得主背書的傳播效應快速累積學術社群信任,形成話語權優勢

定價策略

ChatGPT 5.5 Pro 採高端訂閱模式。在數學研究場景下,若兩小時「博士級」研究的成本低於招募一位博士後研究員的日薪,性價比論述即成立。然而 Gowers 特別提醒,高昂成本已形成研究資源不平等——能否取用高價 AI 模型,正成為新的學術能力門檻。

企業導入阻力

  • 學術界對 AI 貢獻的著作權與學術信用認定仍無共識,投稿規範尚在制定中
  • 數學期刊同儕審查流程尚未建立 AI 輔助內容的驗證標準

第二序影響

  • 數學研究生態可能向「有高端 AI 取用能力的機構」集中,加劇南北半球和貧富院校間的研究資源差距
  • 傳統數學訓練體系——「透過親自解題獲得洞察」——的核心價值主張面臨重新定義

判決:短期顛覆性顯著(但邊界與學術倫理仍待釐清)

ChatGPT 5.5 Pro 在 Gowers 實驗中的表現已超越「輔助工具」範疇,開始觸及「研究夥伴」的定義邊界。成本門檻、能力邊界(進階領域的概念性錯誤)、以及學術信用認定體系的滯後,使其尚未成為所有數學研究者的標配。2026 下半年同儕審查的實際通過率,將是判斷這波能力躍升能否固化為研究標準流程的關鍵指標。

數據與對比

時間基準(Gowers 實驗完整時間軸)

  • 初始問題(Nathanson 指數界 → 最優多項式界):17 分 5 秒
  • 第一份 LaTeX 預印本生成:2 分 23 秒
  • Rajagopal 廣義問題首輪改良:16 分 41 秒
  • 第二份預印本生成:47 分 39 秒
  • 最終多項式界預印本完成:31 分 40 秒

成果量級

改良路徑:Nathanson 指數界 → 指數 k^(1/2+ε) (第一步)→ 最終多項式界 O(k^(10h³)) (第二步)。從指數到多項式是複雜度理論中的本質性跨越。全部成果在兩小時內完成,Gowers 評定達「博士論文章節等級」。

最佳 vs 最差場景

推薦用

  • 探索有明確形式化問題陳述的開放數學問題,特別是組合數論領域
  • 加速文獻整合——讓模型識別跨時代文獻的潛在技術連結
  • 快速生成 LaTeX 預印本草稿供領域專家人工審查

千萬別用

  • 高度抽象或需要幾何直覺的進階領域(如 Clifford 代數),模型已知有概念性錯誤紀錄
  • 直接引用模型輸出作為正式發表依據——所有數學斷言仍需逐步人工驗證

唱反調

反論

Gowers 選擇的問題是否本就在 ChatGPT 訓練資料的「可解範圍」內?若 Nathanson 的論文已在訓練截止日前公開,模型可能是在「辨識模式」而非「真正創造」——兩者的認知意義截然不同。

反論

「博士級」的評定來自同一位實驗設計者,缺乏獨立同儕審查支撐。在數學界,一個看似正確的論證可能在細節審查中崩潰,目前尚無第三方數論專家完整驗證模型每個推理步驟。

社群風向

Bluesky@tachikoma.elsewhereunbound.com(Bluesky 17 讚)
即便這些結果如此令人印象深刻,我仍從中感受到莫拉維克悖論的影子
X@mattshumer_(HyperWrite CEO)
我已使用 GPT-5.5 數週。這是一次巨大的飛躍。但奇怪的是:對 99% 的用戶來說,這可能並不重要。而且有一個讓人非常沮喪的重大退步。
Hacker News@doginasuit(HN 用戶)
這樣說可能不太受歡迎——但我覺得電力更令人印象深刻。
Bluesky@kelatonin.bsky.social(Bluesky 1068 讚)
OpenAI 顯然不得不在 Chat GPT 5.5 上加了個限制器,懇請它不要提到地精或小精靈——因為自 5.1 起它一直在不請自來地提起地精。如果今年有什麼是我所需要的,那就是讓地精成為 ChatGPT 模型崩潰的先兆。
Hacker News@pear01(HN 用戶)
這是對抗性的經濟環境。在工作中使用 LLM 並不意味著工作本身具有挑戰性。很多工作都是「狗屁工作」。人們使用 LLM 是因為它給他們省下了時間——如果他們不用,同事就會用,讓他們顯得落後。

炒作指數

先觀望
4/5

行動建議

Try
用 ChatGPT 5.5 Pro 挑戰自己研究領域的一道開放問題,觀察模型在零提示條件下的推理策略與技術組合
Build
設計「AI 輔助研究流程」:問題形式化 → 模型推理 → 人工逐步驗證 → Lean 形式化確認,建立可重複的研究管線
Watch
追蹤 2026 年首批通過主流數學期刊同儕審查的 AI 輔助論文,以及學術界對 AI 貢獻著作權的規範共識進展
ALIBABA技術

12GB 顯卡跑 35B 模型達 80 tok/s:Qwen3.6 MoE 與本地推理的新里程碑

MTP 預測頭、MoE 稀疏路由與 TurboQuant 量化如何重新定義消費級推理極限

發布日期2026-05-10
補充連結Reddit — Qwen3.6 35B A3B Uncensored Heretic MTP 版本 - 社群 heretic 微調版,保留全部 19 個 MTP 頭,KLD 0.0015,提供 GGUF、Safetensors、NVFP4、GPTQ-Int4 多格式
補充連結Reddit — BeeLlama.cpp DFlash & TurboQuant 200K context 實測 - 社群 fork 整合 DFlash 與 TurboQuant,RTX 3090 跑 Qwen3.6-27B Q5 達峰值 135 tok/s,200K 上下文
補充連結Amine Raji — Qwen3.6 24GB VRAM 完整評測 - 24GB 顯卡實測 80-101 tok/s,含配置最佳化與常見錯誤
補充連結llama.cpp PR #22673 — MTP 支援 - 新增 Multi-Token Prediction beta 支援,引入 --spec-type mtp 旗標
補充連結llama.cpp Discussion #20969 — TurboQuant KV 快取量化 - KV 快取壓縮至 3.25 bit,壓縮比 4.9×,困惑度損失 <1.1%

重點摘要

12GB 顯卡跑 35B?標題有點誇,但消費級 MoE 推理確實來了

技術

Qwen3.6-35B-A3B 採 MoE 架構,256 個專家中每次僅啟動 8 個,前向計算僅需 3.6B 活躍參數;搭配 llama.cpp 原生 MTP 可實現 1.5-2.9× 加速,無需額外草稿模型。

成本

RTX 3090(24GB) 實測 80-101 tok/s;BeeLlama.cpp 加 TurboQuant 達峰值 135 tok/s;12GB 顯卡 CPU 卸載後只有 12-18 tok/s,「80 tok/s on 12GB」的標題具誤導性。

落地

CUDA 版本需嚴格避開 13.2(會產生損壞輸出),搭配 --cpu-moe、--cache-type-k q8_0 與 --no-mmap 三個旗標;消費級硬體跑 35B 已成現實,但精細配置是門檻。

前情提要

突破顯存限制——Qwen3.6 35B A3B 的 MoE 架構優勢

Qwen3.6-35B-A3B 採用混合專家 (MoE) 架構,模型總參數達 350 億,但每次前向計算僅路由至 256 個專家中的 8 個(加 1 個共享專家),實際激活參數量約 36 億——以 7B 等級的計算量換取接近 35B 密集模型的表達能力。

llama.cpp 的 --cpu-moe 旗標可將未啟動的專家卸載至系統記憶體,讓 12GB 顯卡得以載入模型。傳統密集 35B 模型在 FP16 精度下需至少 70GB VRAM,MoE 稀疏路由從根本上重新定義了「大模型」所需的硬體門檻。

名詞解釋
MoE(Mixture-of-Experts,混合專家模型):稀疏神經網路架構,每次前向計算只激活少數幾個「專家」子網路,大幅提升參數規模與計算效率的比值。

llama.cpp MTP 與 BeeLlama 加速技術解析

llama.cpp PR #22673 引入了 Multi-Token Prediction(MTP) 的 beta 支援,直接利用 Qwen3.6-35B-A3B 模型內建的 19 個預測頭,在單次前向計算中同時預測多個 token,無需額外草稿模型,草稿接受率約達 80%,實現 1.5× 至 2.9× 加速。

傳統推測解碼 (Speculative Decoding) 在此架構上則是淨負效益:稀疏路由導致驗證草稿 token 時需啟動更多專家聯集。zolotukhin.ai 的 19 種配置實測確認,搭配 Qwen3.5-0.8B 草稿模型在 batch=1 下反而比無加速慢 3-12%。

社群 BeeLlama.cpp fork 整合了 DFlash(進階 Flash Attention 記憶體存取最佳化)與 TurboQuant(KV 快取極致量化),後者將 KV 快取壓縮至每值約 3.25 位元(壓縮比 4.9×),使 RTX 3090 在 200K 上下文下跑 Qwen3.6-27B Q5 達峰值 135 tok/s,是基線的 2-3 倍。若無 TurboQuant,24GB VRAM 在上下文超過 65K token 後性能即顯著退化。

社群實測——不同硬體配置下的性能數據

此次最引發討論的是「12GB VRAM 跑 80 tok/s 與 128K 上下文」的標題。社群用戶 u/janvitos 迅速指出,Qwen3.6-35B-A3B 無法裝入 12GB 顯卡的 VRAM,所謂「80 tok/s」實際上是 24GB RTX 3090 的成績。

Amine Raji 的 24GB 完整實測確認可達 80-101 tok/s;12GB 顯卡(如 RTX 3060)透過 --cpu-moe 卸載後實際僅 12-18 tok/s,受限於 PCIe 頻寬。u/house_monkey 也回報了 16GB AMD 顯卡的重現困難,顯示跨廠商支援仍是一大挑戰。

白話比喻
這就像把 35 人樂團擠進 12 坪的房間——樂手確實進去了,但多數人得站到走廊(系統記憶體),演奏時不停進出造成延遲,速度遠不及正式音樂廳的水準。

消費級硬體跑大模型的生態意義與趨勢

Qwen3.6-35B-A3B 的出現,標誌著消費級 GPU 執行 SOTA 級模型從理論走向實踐的新階段。SWE-Bench Verified 對比顯示,Qwen3.6-35B-A3B 得分 73.4%,Opus 4.7(估計 ~5T 參數)得分 87.6%——差距存在,但前者可在消費級硬體免費運行,無速率限制。

名詞解釋
SWE-Bench Verified:軟體工程評測基準,評估 AI 模型解決真實 GitHub issue 的能力;「Verified」版本由人工核實題目正確性,是衡量 coding AI 能力的主流指標之一。

社群「heretic」uncensored 微調版保留全部 19 個 MTP 頭,KLD 散度僅 0.0015,每 100 次問題約 10 次拒絕,以多格式發布。HN 用戶 lhl 更嘗試針對 W7900(RDNA3) 最佳化推理核,顯示自訂硬體推理的門檻正在降低,AI 民主化的基礎設施層已出現明顯加速。

核心技術深挖

Qwen3.6-35B-A3B 的推理性能來自三個可獨立疊加的機制,分別解決不同層面的硬體瓶頸。

機制 1:MoE 稀疏路由——以 3.6B 計算量換取 35B 能力

每次前向計算中,路由器從 256 個專家子網路選出 8 個激活,加上 1 個共享專家,合計激活約 3.6B 參數;未激活的專家存在於磁碟或系統記憶體,不參與計算。

llama.cpp 的 --cpu-moe 旗標讓 GPU 只快取常用專家,其餘留在系統 RAM,使 35B MoE 在 12GB 顯卡上成為可能——但每次路由切換都需 PCIe 傳輸,batch=1 場景下延遲損耗明顯。

機制 2:Native MTP 預測頭——不依賴草稿模型的推測加速

Qwen3.6-35B-A3B 權重內建 19 個 MTP 預測頭,llama.cpp 透過 --spec-type mtp--spec-draft-n-max N 旗標啟用。每次前向計算,MTP 頭同步預測後續 N 個 token 草稿,主模型一次性驗證——草稿接受率 ~80%,加速比 1.5×-2.9×。

傳統草稿模型方案(如 Qwen3.5-0.8B)在 MoE 上的負效益已由 zolotukhin.ai 的 19 配置實測確認:驗證步驟需啟動草稿與主模型出現的專家聯集,net 效果反而慢 3-12%。

名詞解釋
MTP(Multi-Token Prediction,多 token 預測):將多個預測頭直接嵌入主模型權重的推理加速技術,不同於需要獨立草稿模型的傳統推測解碼 (Speculative Decoding) 。

機制 3:TurboQuant KV 快取量化——上下文長度瓶頸的根本解法

TurboQuant 使用 Randomized Hadamard Transforms 對 KV 快取進行旋轉變換後,以 Lloyd-Max 量化壓縮至每值約 3.25 位元(FP16 壓縮比 4.9×),困惑度損失低於 1.1%。原本 34GB VRAM 下僅支援 109K token 的配置,搭配 TurboQuant 後可擴展至 536K token。

BeeLlama.cpp 將 TurboQuant 與 DFlash 整合,在 RTX 3090 單卡實現 Qwen3.6-27B Q5 於 200K 上下文下的峰值 135 tok/s。

白話比喻
TurboQuant 就像把語境「筆記本」從精裝版壓縮成電子書——字義損失極小,但書架空間 (VRAM) 縮小近 5 倍,可塞進更多章節(更長上下文)。

工程視角

環境需求

  • GPU:RTX 3090(24GB) 為推薦最低實用配置;12GB 需 --cpu-moe 且接受明顯降速
  • 系統記憶體:32GB+,CPU 卸載模式建議 64GB
  • CUDA:12.8 或更早版本——13.2 已確認在 Qwen3.6 上產生損壞輸出
  • llama.cpp:含 PR #22673 的最新版本以啟用 MTP

最小 PoC

# RTX 3090(24GB)完整 GPU 推理 + MTP
./llama-cli \
  -m Qwen3.6-35B-A3B-Q4_K_M.gguf \
  --gpu-layers 99 \
  --cache-type-k q8_0 \
  --spec-type mtp \
  --spec-draft-n-max 4 \
  -p "請分析這段程式碼的效能問題。"

# 12GB GPU:CPU 卸載專家
./llama-cli \
  -m Qwen3.6-35B-A3B-Q4_K_M.gguf \
  --gpu-layers 60 \
  --cpu-moe \
  --no-mmap \
  --cache-type-k q8_0 \
  -p "請分析這段程式碼的效能問題。"

驗測規劃

先跑 10-20 token 短提示確認輸出不亂碼(CUDA 13.2 損壞問題立即顯現),再跑 512 token 輸出壓測確認 tok/s,最後用 4K+ token 提示測試長上下文無記憶體溢出。

常見陷阱

  • CUDA 13.2 輸出損壞:降回 12.8 即可解決,不要嘗試其他繞路方案
  • 傳統推測解碼反效果:勿搭配 Qwen3.5-0.8B 草稿模型,MoE 稀疏路由下有淨負效益
  • mmap 使用時機:Linux CPU 卸載模式可用 mmap 避免重複載入;GPU 全量推理改 --no-mmap
  • 上下文瓶頸:未使用 TurboQuant 時,24GB 顯卡超過 65K token 後性能顯著退化

上線檢核清單

  • 觀測:tok/s 實時監控,MTP 草稿接受率(目標 >70%),CUDA 錯誤日誌
  • 成本:RTX 3090 約 350W,長時間高負載需評估散熱與電費
  • 風險:CUDA 12.8 鎖定可能影響同機器其他 CUDA 依賴服務的升級路徑

商業視角

競爭版圖

  • 直接競品:Meta Llama 4 Scout(MoE,17B-A5B),DeepSeek-V3(MoE,671B-A37B),Mixtral 8x22B
  • 間接競品:Anthropic Claude Haiku(雲端 API 低成本選項),Google Gemma 4(含 MTP,Ollama 已整合)

護城河類型

  • 工程護城河:19 個原生 MTP 預測頭直接嵌入模型權重,heretic 版 KLD 0.0015 驗證微調後能力保留
  • 生態護城河:GGUF、Safetensors、NVFP4、GPTQ-Int4 多格式,llama.cpp、vLLM、Ollama 均快速跟進

定價策略

Qwen3.6 系列採開放權重策略,本地推理零邊際成本,主要商業化路徑為通義千問雲端 API。

本地版與雲端版形成差異化分層,類似 Meta Llama 的雙軌策略——開放權重建立生態護城河,同時不放棄商業收益。

企業導入阻力

  • CUDA 12.8 鎖定可能與企業現有 GPU 叢集配置衝突,升級路徑需額外評估
  • 12GB 顯卡性能落差 (12-18 tok/s) 意味著企業部署至少需要 24GB 顯卡
  • TurboQuant、BeeLlama.cpp 仍是社群實驗性 fork,穩定性存在不確定性

第二序影響

  • 消費級 35B MoE 成熟將加速「本地私有 AI 助理」市場,對雲端 API 廠商形成部分替代壓力
  • 推理核心最佳化已成開源競爭新主戰場,不再只是模型能力的比拼

判決:本地 MoE 推理進入主流(技術成熟但 12GB 標題有所誇大)

Qwen3.6-35B-A3B 代表消費級硬體跑大模型的真實突破,但「12GB 跑 80 tok/s」的標題本身具有誤導性。真實優質體驗需要 24GB 顯卡加精細配置,CUDA 版本限制是不可忽視的工程門檻。對於已有 RTX 3090 或同等配置 GPU 的開發者,目前已是值得認真評估本地 35B 部署的時機點。

數據與對比

24GB 顯卡 (RTX 3090) 基準

Amine Raji 完整實測確認,標準 llama.cpp 配置下跑 Qwen3.6-35B-A3B 可達 80-101 tok/s,搭配 MTP 後接近上限。

BeeLlama.cpp 峰值 (RTX 3090)

DFlash + TurboQuant 組合,Qwen3.6-27B Q5 在 200K token 上下文下達峰值 135 tok/s,是基線吞吐量的 2-3 倍。

12GB 顯卡 (RTX 3060)CPU 卸載

啟用 --cpu-moe 後,實際速度約 12-18 tok/s,PCIe 頻寬是主要瓶頸,與標題「80 tok/s on 12GB」差距顯著。

傳統推測解碼(負效益驗證)

使用 Qwen3.5-0.8B 草稿模型的傳統方案,在 19 種配置實測中均比無加速慢 3-12%,MoE 稀疏路由下淨負效益已確立。

最佳 vs 最差場景

推薦用

  • 24GB 顯卡用戶:本地代碼助理,搭配 MTP 可達 80+ tok/s 的流暢互動體驗,無速率限制
  • 長上下文摘要與文件分析:TurboQuant 可將可用上下文從 65K 擴展至 200K+,在單卡上實現
  • 研究用微調基底:heretic 版本 KLD 0.0015,保留 19 個 MTP 頭,多格式可直接用於繼續訓練

千萬別用

  • 12GB 顯卡期望達到 80 tok/s:CPU 卸載後實際只有 12-18 tok/s,體驗不符預期
  • 生產 API 服務有嚴格 P99 延遲要求:MoE 路由切換帶來不確定性延遲,不適合 SLA 嚴格的場景
  • CUDA 13.2 環境:已確認產生損壞輸出,必須降至 12.8 或更早版本方可使用

唱反調

反論

「12GB 跑 80 tok/s」的誇大標題可能讓用戶誤判自己的硬體門檻,引發失望情緒並損害社群信任

反論

傳統推測解碼在 MoE 架構上的負效益揭示更深層問題:現有推理加速技術預設密集模型,MoE 稀疏路由正打破這些假設,未來可能有更多「反效果」陷阱待發現

反論

TurboQuant 與 BeeLlama.cpp 仍是社群實驗性 fork,未合入主線 llama.cpp,長期維護與穩定性存在不確定性

社群風向

Reddit r/LocalLLaMA@u/janvitos
太棒了!不過這實際上是因為整個模型都裝進了你的 VRAM,而這在 12GB 的 GPU 上是不可能的。
Reddit r/LocalLLaMA@u/tarruda
我還沒試過這個,但我試過他的 27B 版本搭配 MTP,看起來有效:速度從約 17 tok/s 提升到 ~25 tok/s,不過我只測了模型通常不會拒絕的普通提示。
Reddit r/LocalLLaMA@u/farkinga
當模型很大、且權重本來就會放進系統記憶體時(例如 MoE),在 Linux 上使用 mmap 可以避免把整個模型載入 RAM——Linux 會按需載入權重。但如果你有性能理由要把權重保留在 RAM 中,就改用 --no-mmap,速度會快一些,但啟動較慢。
X@Hesamation
Opus 4.7 估計是 ~5T 參數的模型,Qwen 3.6 推理時只用 3B。SWE-Bench Verified:Opus 4.7 87.6%,Qwen3.6-35B-A3B 73.4%。沒有速率限制,可以免費運行。分數差距確實存在,但這個組合真的令人印象深刻。
HN@lhl(HN 用戶)
我認為,隨著 SOTA AI 能更好地最佳化推理 kernel,更多人應該嘗試為自己的特定硬體打造更好的推理工具。我有一張 W7900(RDNA3) ,48GB VRAM 但 ROCm 和 llama.cpp 支援一直很差,最近決定把它改造成專用 agent 推理端點,開始調優 W8A8-INT8 模型。

炒作指數

值得一試
4/5

行動建議

Try
若你有 RTX 3090 或等效 24GB 顯卡,下載 Qwen3.6-35B-A3B Q4_K_M GGUF 並搭配 --spec-type mtp --spec-draft-n-max 4 測試 MTP 加速效果,確認 tok/s 是否達到預期 1.5× 以上
Build
評估 BeeLlama.cpp 的 TurboQuant 是否適合你的長上下文場景——若需要 128K+ 上下文,TurboQuant 是目前消費級硬體上最可行的方案,值得建立測試環境驗證
Watch
追蹤 llama.cpp PR #22673 的 MTP 正式合入進度與 TurboQuant 是否進入主線——一旦穩定版合入,配置複雜度將大幅降低,維護風險也隨之減少
MEDIA論述

偽科學「情緒 AI」悄悄入侵職場:當老闆用演算法讀你的表情

科學基礎早被推翻的情緒辨識技術,正悄悄成為企業監控員工的新工具

發布日期2026-05-10
主要來源The Decoder
補充連結Technology's Legal Edge:EU AI Act 職場情緒辨識系統焦點 - 詳解歐盟 AI 法案對職場情緒偵測禁令條款、適用範圍與執法時程
補充連結FPF:EU AI Act 下的情緒辨識紅線 - 隱私基金會解析職場與教育機構情緒辨識的明確禁令範圍
補充連結ACM CHI 2023:職場情緒 AI 的監控意涵 - 學術研究揭示情緒 AI 對員工造成情緒勞動負擔與績效扭曲
補充連結Nature:是時候監管解讀人類情緒的 AI 了 - 《自然》期刊呼籲建立情緒辨識 AI 的監管框架

重點摘要

用偽科學讀情緒,老闆的演算法比你更「了解」你?

爭議

情緒 AI 以 Ekman 情緒理論為基礎,但人在憤怒時皺眉的比例僅 35%,科學根基早被學界推翻。

實務

MetLife、Burger King 等企業已靜默部署;HireVue 的聽障員工被拒升遷,系統性歧視風險真實存在。

趨勢

歐盟已於 2025 年禁止職場情緒偵測,2026 年 8 月全面執法;多國立法趨勢收緊,監管真空即將結束。

前情提要

章節一:什麼是情緒 AI?技術宣稱與科學現實的落差

情緒 AI 系統聲稱能透過面部表情、語音音調、鍵盤行為或生理數值(心率、呼吸)推斷人類內心狀態。這些技術多以心理學家 Paul Ekman 提出的「六種基本情緒」理論為基礎,將可觀察的外在動作直接映射為主觀情緒狀態。

然而,這套理論早在學界遭到廣泛批評,被認為「過度簡化且方法論存在缺陷」。全球情緒 AI 市場預計 2030 年達 90 億美元,部分樂觀預測甚至認為 2032 年可達 4,466 億美元——市場規模的膨脹速度,遠遠超過其科學依據的積累。

名詞解釋
Paul Ekman 六種基本情緒理論:由心理學家 Paul Ekman 提出,主張人類有六種跨文化普遍的基本情緒且各有對應面部表情。當代神經科學與跨文化研究已對此理論提出大量反駁,視其為過度簡化的情緒模型。

章節二:企業如何在員工不知情下部署情緒偵測

情緒 AI 的商業落地遠比公眾認知的更廣泛。MetLife 已在客服中心監測員工的音調與語氣;Burger King 試驗名為「Patty」的耳機聊天機器人即時評估員工友善度;辦公家具品牌 Framery 測試配備生物感測器的辦公椅,量測員工心率、呼吸與緊張程度。

Slack 透過 Aware、Microsoft 透過 Azure 提供情緒分析工具;面試篩選平台 HireVue 已因涉嫌歧視遭受指控。曾在佛羅倫斯運營臉部表情分析的 MorphCast,在歐盟禁令實施後遷往美國灣區,選擇監管最寬鬆的市場繼續運作。

章節三:心理學界的反駁——面部表情為何無法可靠判讀情緒

神經科學家 Lisa Feldman Barrett 明確指出,面部動作「並不具備固有的情緒意涵」。一個關鍵數據足以動搖情緒 AI 的核心假設:人們在憤怒時,真正做出皺眉表情的比例僅有約 35%。

換言之,即使系統正確偵測了面部動作,也有近三分之二的機率誤判當事人的實際情緒。研究人員 Lauren Rhue 發現,情緒辨識 AI 將黑人 NBA 球員判讀為比白人隊友「更憤怒」,有時甚至與球員的實際表情無關。

2018 年 AI Now Report 直接將臉部情緒編碼定性為偽科學,將其與顱相學相提並論。ACM CHI 2023 學術研究進一步指出,情緒 AI 強迫員工進行「情緒勞動」——在系統面前刻意管理自己的外表,造成焦慮與注意力分散,且有效性爭議從未獲得解決。

名詞解釋
顱相學 (Phrenology) :19 世紀流行的偽科學,聲稱可透過測量頭骨形狀判斷人的性格與智力。AI Now Report 將臉部情緒編碼與之相提並論,意在揭示兩者皆以不可靠的外部特徵聲稱推斷內在心理狀態。

章節四:監管真空下的員工權益與立法走向

具體傷害案例已浮現。UnitedHealth 的社工因在輔導病患時鍵盤閒置而遭到降等考核;HireVue 系統據稱拒絕一名聽障員工的晉升機會,並荒謬地建議她「練習主動聆聽」。

歐盟走在監管最前線:EU AI Act 已於 2025 年 2 月 2 日起禁止職場情緒偵測系統,全面執法日期為 2026 年 8 月 2 日。禁令範圍涵蓋員工、承包商、實習生、志工及招募甄選流程,僅醫療與安全理由可豁免。

歐盟以外,監管真空仍在持續。多國立法者預計於 2026 年後將情緒數據列為生物特徵敏感資料,要求嚴格的同意、使用與保留規範。MorphCast 遷往美國灣區的案例,已預示了一種監管套利的可能路徑。

多元觀點

正方立場

情緒 AI 的支持者認為,語氣監測與行為感測即使技術尚未完美,仍有助於識別高壓情境、提升服務品質。MetLife 的客服中心案例中,語氣分析被定位為支援工具而非懲罰機制。

支持者也主張技術正在快速迭代——更大的多元訓練資料集與跨文化校準,有望縮小現有的準確度缺口。90 億至 4,466 億美元的市場預測,反映的是市場對技術長期潛力的押注。

反方立場

批評者指出,情緒 AI 的科學基礎從根本就站不住腳。Lisa Feldman Barrett 的研究揭示,人在憤怒時做出皺眉表情的比例僅 35%,意味著系統誤判率在多數情境下超過六成。

Lauren Rhue 的研究更顯示情緒辨識 AI 對黑人員工存在系統性種族偏見。HireVue 聽障員工案例與 AI Now Report 將此技術類比顱相學,共同揭示這不只是準確度問題,而是偽科學與歧視的自動化。

中立/務實觀點

務實的立場在於區分「有用的行為訊號」與「情緒宣稱」。監測通話時長、對話節奏,與聲稱「系統判定員工正在憤怒」之間,存在根本性差異。

歐盟 AI 法案的禁令提供了清晰的紅線:禁止的是「推斷情緒狀態」,而非所有行為數據收集。企業若能主動採納這條界線,在歐盟以外也能規避未來執法風險。

實務影響

對開發者的影響

開發 HR 科技、面試平台或員工監控工具的工程師,需正視情緒 AI 的法律與倫理風險。歐盟 AI 法案禁令已於 2025 年 2 月 2 日生效,全面執法期限為 2026 年 8 月 2 日,涵蓋員工、承包商乃至招募流程。

若產品部署於歐盟市場,任何聲稱能「判讀情緒」的功能——無論基於面部表情、語音或生理感測——都面臨直接的合規風險。建議在設計階段即區分「行為數據記錄」與「情緒狀態推斷」,後者在多數司法管轄區已踩上紅線。

對團隊/組織的影響

採購 Slack Aware、Azure 情緒分析或類似工具的企業決策者,需立即審查現有合約條款,確認供應商對「情緒推斷功能」的具體定義與豁免說明。

UnitedHealth 社工案例與 HireVue 聽障員工案例,揭示的不僅是技術失準,更是潛在的勞動法與反歧視法訴訟風險。在全球監管趨勢明確收緊的背景下,主動退出比等待執法更有利。

短期行動建議

  1. 審查現有工具的供應商條款,確認是否包含情緒分析或面部辨識功能
  2. 若在歐盟運營,立即評估 EU AI Act 合規差距,重點聚焦招募流程與員工監控
  3. 建立內部政策,明確區分「許可的行為數據收集」與「禁止的情緒狀態推斷」

社會面向

產業結構變化

情緒 AI 市場的快速膨脹,部分源於「情緒科技」與「員工體驗管理」話語框架的混淆。Framery 的感測椅、Burger King 的「Patty」耳機,都以「提升員工福祉」為名包裝監控工具。

隨著歐盟禁令生效,MorphCast 遷往美國灣區的案例預示了一種監管套利模式:企業可能將情緒監控業務遷移至法規最寬鬆的市場,形成新的「數據監控避風港」。

倫理邊界

CHI 2023 研究揭示的核心倫理問題在於:情緒 AI 將「情緒勞動」從隱性要求轉變為可量化的績效指標。員工被迫在機器面前管理自己的表情,而這套量化標準的科學有效性從未被驗證。

聽障員工被建議「練習主動聆聽」的案例,是系統盲點的縮影——演算法以「正常」表現為基線,自動排除神經多樣性與文化差異,本質上是將歧視自動化。

長期趨勢預測

多國立法者預計於 2026 年後將情緒數據列為生物特徵敏感資料,要求嚴格的同意、使用與保留規範。現有的企業部署模式——大多在員工不知情下靜默運行——將面臨根本性挑戰。

長期而言,「情緒 AI」這個品牌標籤可能逐漸轉型為「行為分析」或「員工體驗感測」,在話語上與直接情緒推斷保持距離,同時在技術層面繼續推進相似功能。

唱反調

反論

情緒 AI 技術仍在快速迭代,現有批評多基於當前版本,更大的多元訓練資料集與跨文化校準,未來可能顯著提升準確度與公平性。

反論

部分職場應用(如高壓客服情境的語氣偵測)若能提供即時支援,可能反而有助員工福祉,不宜將所有部署形式一概視為不可接受的監控。

社群風向

Hacker News@dijit(HN 用戶)
「LLMs 現在能捕捉意圖了」,對我來說跟「AI 現在有情感了,我的 AI 女友跟我說的」沒什麼兩樣。我不否定你作為一個人或專業人士,但我們這些肉體凡人就是喜歡在沒有意識的東西上尋找靈魂——我們不停地擬人化身邊的事物,從小時候就這樣。我們太容易被愚弄和誤導了。
X@SynchroVerseAI
情緒 AI 正在成為真實的基礎設施。2030 年,市場規模可能從 90 億美元(核心情緒 AI)到 3,800 億美元以上(完整情感運算)不等,取決於如何定義這個市場。這是 AI 停止分析數據、開始理解人類的那一層。
X@rohanpaul_ai(AI 研究員與教育者)
這篇論文發現語言模型內建情緒迴路,可被追蹤與控制。研究者建立了一個乾淨的資料集——涵蓋相同情境下正面、中性或負面結果,以便將情緒與內容分離。最大突破是證明 LLM 中的情緒是真實存在的,而非模擬。
Bluesky@deltakitsune.bsky.social(4 likes)
1.5 億參數,消費級 GPU,次秒級情緒分類,每次推論免費。第二階段完成——它現在能「看見」情緒了。空行與錯誤 schema 一直在悄悄污染訓練資料,我建了新工具來攔截。第 2.5 階段:分類前先思考。
Bluesky@babayagafella.bsky.social(13 likes)
看起來像極了老套、乏味、脫離現實的產物。讓人覺得這段文字不是被 AI 嚴肅生成,就是套著某種方法論寫出來的——完全沒有真實的情感。沒有任何新意:同樣的「鬥爭」、「歷史使命」、「敵人」等陳腔濫調。

炒作指數

追整體趨勢
4/5

行動建議

Try
閱讀 EU AI Act 對情緒辨識系統的具體條款(FPF 解析文章),評估你所在地區的合規義務與時程
Build
若開發 HR 科技或員工監控工具,在設計層明確區分「行為數據記錄」與「情緒狀態推斷」,後者在多數司法管轄區已踩上紅線
Watch
追蹤各國將情緒數據列入生物特徵敏感資料的立法進展,及 2026 年 8 月 EU AI Act 全面執法後的第一批執法案例
GITHUB生態

字節跳動開源 UI-TARS Desktop:連接多模態模型與 Agent 基礎設施的桌面方案

Apache 2.0 授權、純視覺迴圈架構,ScreenSpotPro 達 61.6% SOTA,以開源路線挑戰 Claude Computer Use

發布日期2026-05-10
補充連結ByteDance Seed UI-TARS-1.5 開源部落格 - UI-TARS-1.5 四大技術支柱與七個基準測試數據
補充連結paperclipped.de — UI-TARS Desktop 分析 - 雙架構設計與企業應用場景
補充連結yuv.ai — UI-TARS-desktop 技術評測 - 與 Claude Computer Use 和 Open Interpreter 定位比較
補充連結arXiv — UI-TARS: Pioneering Automated GUI Interaction - 模型訓練方法與基準測試設計原始論文

重點摘要

不讀 DOM、不靠 API——純像素視覺 Agent,把任何有螢幕的軟體都變成可自動化的目標

技術

UI-TARS-1.5 在 ScreenSpotPro 達 61.6%,遠超 Claude 27.7%,7B 模型可在 RTX 3090 以 4-bit 量化本地運行,螢幕資料不外傳。

成本

Apache 2.0 開源免費可商用,7B 本地部署需 12GB+ VRAM(量化後),雲端後端每步約 0.02–0.05 USD。

落地

適合自動化無 API 的遺留系統(SAP GUI、醫療紀錄),任務成功率在 70–80% 達瓶頸,非關鍵流程或人機協作模式最實用。

前情提要

UI-TARS 是什麼——從視覺理解到桌面自動化操作

UI-TARS Desktop 是字節跳動於 2025 年 1 月開源的多模態 Agent 平台,核心模型提供 2B、7B、72B 三種參數規模,全部採 Apache 2.0 授權。它定位為「開源多模態 AI Agent Stack」,目標是連接前沿 AI 模型與 Agent 基礎設施,讓桌面自動化走向本地可部署的開放生態。

設計哲學是「純視覺迴圈」:以截圖作為唯一輸入,不解析 DOM 樹、不讀取 Accessibility Tree,直接讓視覺語言模型 (VLM) 看著螢幕決策並執行操作。

名詞解釋
VLM(視覺語言模型):能同時理解圖像與文字的大型語言模型,如 GPT-4V、Claude 3 Sonnet。UI-TARS 以截圖作為視覺輸入,輸出結構化操作指令。

整個推理循環在單次 forward pass 完成:截圖捕捉 → VLM 處理(最高 1344×1344 解析度)→ 結構化動作解析 → OS 層執行 → 截圖比對驗證。這個閉環讓 UI-TARS 能操作任何「有螢幕的應用程式」,從現代 SaaS 到數十年歷史的遺留系統。

2025 年 4 月發布的 UI-TARS-1.5 在七個 GUI 基準達 SOTA,ScreenSpotPro 準確率 61.6%(Claude 27.7%,CUA 23.4%)。DeepLearning.AI 指出,它建立在 Qwen2-VL 基礎上,採用思維鏈推理識別並選擇桌面與行動應用的最佳動作。

開源多模態 Agent Stack 的技術架構

UI-TARS Desktop 採雙架構設計:Agent TARS 負責 CLI 與 Web 互動;Desktop App(基於 Electron)負責原生 OS 層控制,兩者透過 Turbo monorepo + pnpm workspace 統一管理,支援 Windows、macOS、Linux 三平台。

UI-TARS-1.5 的技術突破來自四大支柱:增強視覺感知、System 2 推理(行動前生成思維鏈)、跨平台統一動作空間、自我演化訓練(自動收集操作軌跡並反思式訓練)。

Model Context Protocol(MCP) 整合讓 VLM 視覺理解與 API 工具調用並行——例如視覺讀取螢幕訂單號,再透過 MCP 查詢內部資料庫。支援模型包括 UI-TARS 系列 (2B/7B-DPO/72B-DPO) 、Seed-1.5-VL/1.6,以及 Claude 3.7 Sonnet 與 Volcengine Doubao。

至 2026 年 5 月,GitHub repo 累積 31,400+ stars 和 3,100+ forks,程式碼庫以 TypeScript 為主(佔 89.1%)。v0.3.0 新增串流支援、執行統計與 Event Stream Viewer,強化開發者可觀測性。

與 Claude Computer Use、Open Interpreter 等方案的定位比較

UI-TARS 最根本的差異在於「開源開權重 (open-weight) 可本地部署」:7B 模型在 RTX 3090/4090 配合 4-bit 量化即可本地運行,螢幕資料完全不離機,而 Claude Computer Use 每次操作必須透過 Anthropic API 傳送截圖。

名詞解釋
open-weight(開放權重):模型參數公開可下載並允許商業使用,與「完全開源」略有不同——不一定公開訓練代碼或資料集。UI-TARS 系列屬於 open-weight + Apache 2.0,兩者兼具。

與 Open Interpreter 的代碼執行路徑相比,UI-TARS 走純視覺像素路線——不解析 DOM、不需任何 API 整合。正如社群評論所指:「Vision-based agents work from raw pixels...this is harder and slower, but it works on literally anything with a screen.」這使它能攻克 SAP GUI、醫療紀錄等無 API 的遺留系統。

OSWorld(桌面自動化)UI-TARS-72B-DPO 達 24.6%,高於 Claude Computer Use 22.0% 和 GPT-4o 12.2%;WebArena 72B 模型達 52.1%;AndroidWorld 7B 模型達 46.6%,輕量版本在行動端仍具競爭力。

桌面 Agent 的應用場景、限制與生態展望

UI-TARS 的強項集中在三類場景:

  • 跨應用多步驟工作流(瀏覽器、Office 工具、本地程式的自動化鏈)
  • 介面頻繁變動的系統(傳統 RPA 工具改版即失效,UI-TARS 只看像素不受影響)
  • 需要合規的本地化自動化(螢幕資料完全不外傳,符合醫療、金融等高合規要求)

限制方面:每個動作週期需 1–5 秒(72B 最慢),任務成功率在 70–80% 達到瓶頸,複雜工作流仍需 20 步以上規劃。7B 模型需 16GB+ VRAM(4-bit 量化可降至 12GB),對消費級設備門檻不低。

生態展望上,UI-TARS-2 已宣布為「All In One」Agent 模型,計畫整合 GUI、遊戲、代碼與工具調用。Agent TARS Beta 與 CLI 預計 2025 年 6 月推出,將多模態 Agent 能力延伸至終端機與 Web UI,形成完整的開源 Agent 基礎設施。

核心技術深挖

UI-TARS Desktop 的技術核心是「純視覺迴圈」架構,將整個桌面自動化流程壓縮在單次 VLM forward pass 中完成,不依賴獨立 OCR 或物件偵測元件。這個設計決定了它的能力邊界:可操作任何有螢幕的系統,但每步都需等待完整的視覺推理。

機制 1:視覺感知與截圖驅動的決策循環

截圖以最高 1344×1344 解析度送入 VLM,模型輸出結構化動作指令(點擊座標、鍵入文字、滾動等),OS 層執行後再截圖比對驗證。整個循環在單次 forward pass 完成,無需獨立 OCR 元件或物件偵測模型介入。

名詞解釋
forward pass(前向傳播):神經網路處理輸入並生成輸出的單次計算過程。UI-TARS「在單次 forward pass 完成」意味著截圖輸入和動作輸出由同一次模型呼叫處理,而非串聯多個模型。

機制 2:System 2 推理與思維鏈行動規劃

UI-TARS-1.5 在執行每個 GUI 動作前,先生成顯式思考鏈 (Chain-of-Thought) :分析當前螢幕狀態、評估可能動作、確定最終操作。這是從直覺反射到慢思考的架構轉變,顯著提升複雜任務的成功率。

名詞解釋
System 2 推理:借用 Kahneman 雙系統理論,System 2 是慢速、深思熟慮的推理過程。AI Agent 採用 System 2,指在行動前顯式生成推理步驟,而非直接輸出動作。

機制 3:MCP 整合與雙架構協作

Model Context Protocol(MCP) 讓 VLM 視覺理解可與外部 API 工具調用並行——視覺讀取螢幕訂單號,再透過 MCP 查詢內部資料庫確認。Agent TARS(CLI/Web) 與 Desktop App(Electron) 分工處理不同 OS 互動層,統一在 Turbo monorepo 下管理,形成完整的多模態 Agent 基礎設施。

白話比喻
把 UI-TARS 想像成一位不懂程式、但眼力極好的操作員:他盯著螢幕截圖,用滑鼠和鍵盤完成工作,旁邊有一本工具手冊 (MCP) 可查詢外部資料。他不需要知道系統用什麼語言寫的,只要看得到螢幕就能操作。

工程視角

環境需求

Node.js 18+、pnpm workspace。本地模型端:7B-DPO 需 16GB+ VRAM(RTX 3090/4090) ,4-bit 量化可降至 12GB;72B-DPO 需 40GB+ VRAM,消費級設備不建議本地部署。若使用 Cloud API 後端(Claude 3.7 Sonnet、Volcengine Doubao),則無本地 GPU 需求,適合先期驗測。

整合步驟

# Clone repo 並安裝依賴
git clone https://github.com/bytedance/UI-TARS-desktop
cd UI-TARS-desktop && pnpm install

# 啟動 Desktop App(原生 OS 控制)
pnpm run dev:desktop

# 或啟動 Agent TARS CLI 模式(終端機 + Web UI)
pnpm run dev:agent-tars

連接本地模型(Ollama/vLLM 部署 7B-DPO),或在設定介面填入 Claude API Key 使用雲端 VLM 作為後端。MCP 工具整合透過設定 JSON 指定工具伺服器位址。

驗測規劃

以「開啟瀏覽器 → 搜尋指定關鍵字 → 截圖確認結果」作為冒煙測試,成功率應達 90%+。複雜任務(跨應用 10 步以上)的基準成功率為 70–80%;若低於 60%,需排查截圖解析度設定(建議 1280×720 以上)或模型量化配置。

常見陷阱

  • 截圖解析度設定過低(低於 768px 寬)會導致小元素定位失敗
  • 72B 模型未啟用量化時記憶體需求超過 40GB,單張消費級顯卡無法運行
  • MCP 工具調用與視覺動作混用時,工具網路延遲會在每步循環中累積
  • macOS 需手動在「隱私與安全性」中授予截圖與輔助使用權限,否則 OS 層操作會被系統阻擋

上線檢核清單

  • 觀測:Action 成功率(目標 >75%)、每步平均延遲(7B 目標 <2s)、截圖比對失敗率
  • 成本:本地 GPU 電費 vs Cloud API 費用;雲端 72B 後端每步約 0.02–0.05 USD
  • 風險:螢幕內容敏感性分級(本地部署可緩解);自動操作需設定範圍白名單,避免 Agent 越權操作關鍵系統

商業視角

競爭版圖

  • 直接競品:Claude Computer Use(Anthropic API,閉源,需外傳截圖)、Microsoft UFO(Windows-only,開源研究原型)、Open Interpreter(代碼執行路線,非純視覺)
  • 間接競品:UiPath、Automation Anywhere 等規則型 RPA(不具 LLM 推理);Playwright/Selenium(需 DOM/API 存取)

護城河類型

  • 工程護城河:UI-TARS-1.5 在七個 GUI 基準達 SOTA,自我演化訓練形成數據飛輪,後進者難以在短期複製
  • 生態護城河:31.4k stars、Apache 2.0 商用授權、三平台支援、MCP 整合——低接入門檻加速社群貢獻,形成開發者生態黏著度

定價策略

模型 (2B/7B/72B) 完全開源免費,Apache 2.0 授權可商用。字節跳動的商業化路徑預計透過 Volcengine 雲端部署服務收費,或提供企業版 SLA 支援。開源策略的核心目的是建立生態並對抗 Claude Computer Use 的商業閉源優勢。

企業導入阻力

  • 72B 模型硬體需求 (40GB+ VRAM) 超出多數企業現有 GPU 基礎設施
  • 70–80% 的任務成功率上限對生產關鍵流程仍有風險
  • 合規部門對「AI 自動操作桌面」的安全審查流程尚不成熟,授權管理機制需要建立

第二序影響

  • RPA 市場(UiPath、Automation Anywhere)的無 API 自動化優勢面臨根本性威脅——視覺 Agent 不需要整合費或 API 採購
  • 企業 IT 的「系統整合成本」將重新定義:不再需要為遺留系統開發 API,只要有螢幕就能自動化
  • 開源視覺 Agent 生態加速,微軟與 Google 的閉源 Computer Use 方案面臨差異化壓力

判決:短期 PoC 可行,長期待成功率突破(技術路線正確,距生產可靠仍有差距)

七個基準 SOTA 加上 Apache 2.0 是真實競爭力,但 70–80% 成功率上限與每步 1–5 秒延遲意味著目前更適合容忍失敗率的非關鍵流程,或人機協作模式。等待 UI-TARS-2「All In One」模型,可能是更穩健的企業導入策略。

數據與對比

GUI 定位 (ScreenSpotPro)

UI-TARS-1.5 達 61.6%,遠超 Claude Computer Use 27.7% 和 CUA 23.4%,是目前開源模型在 GUI 元素定位基準的最高成績。

桌面自動化 (OSWorld)

UI-TARS-72B-DPO 達 24.6% > Claude Computer Use 22.0% > GPT-4o 12.2%。人類基準為 72.4%,顯示桌面自動化整體仍有巨大提升空間。

瀏覽器任務 (WebArena)

72B 模型達 52.1%,是目前開源模型在 WebArena 的領先成績之一,說明純視覺路線在網頁操作任務中具備實際競爭力。

行動端自動化 (AndroidWorld)

7B 模型達 46.6%,輕量模型在行動端場景具備實用競爭力,企業不必依賴 72B 旗艦版即可覆蓋行動端自動化需求。

最佳 vs 最差場景

推薦用

  • 自動化無 API 的遺留企業系統(SAP GUI、醫療紀錄、保險承保工具)
  • 跨多個桌面應用的多步驟工作流自動化(需跨越瀏覽器、Office 工具、本地程式)
  • 需要螢幕資料不外傳的高合規場景(金融、醫療、法律,本地部署 7B 即可)
  • 本地開發環境的 GUI 回歸測試自動化(介面截圖比對驗證)

千萬別用

  • 要求 99%+ 成功率的生產關鍵流程(目前成功率上限 70–80%)
  • 需要毫秒級響應的即時 UI 互動(每步動作週期 1–5 秒)
  • 已有完整 REST API 的現代 SaaS 系統(使用 API 更穩定可靠且成本更低)

唱反調

反論

70–80% 的任務成功率意味著平均每 5–10 個任務就有 1–2 個失敗,在無人監控的批次流程中,錯誤會累積並難以回滾

反論

純視覺架構的「像素盲點」:螢幕解析度變更、DPI 縮放、暗色模式切換都可能讓模型定位失敗,比 DOM-based 方案更脆弱

反論

字節跳動的開源策略具有商業目的,生態依賴加深後若授權條款調整(如 Meta LLaMA 模式),下游使用者將面臨遷移成本

社群風向

X@DeepLearningAI(DeepLearning.AI — Andrew Ng 的 AI 教育平台)
字節跳動與清華大學的研究人員推出了 UI-TARS,這是一個在電腦使用方面表現出色的微調視覺語言模型。它基於 Qwen2-VL 構建,採用思維鏈推理來識別並選擇桌面與行動應用中的最佳動作。
X@nodeshiftai(NodeShift AI platform)
ByteDance UI-TARS 7B DPO 正在重新定義我們與圖形用戶介面的互動方式,涵蓋桌面、行動裝置和 Web 平台。與傳統自動化工具不同,它無縫整合感知、推理、記憶和行動能力,使其能夠理解並執行任務。
Hacker News@withinrafael(HN 用戶)
我在使用 UI-TARS 模型生成座標和回答問題方面取得了很大的成功。
Bluesky@probbrain.bsky.social(probbrain.com,2 upvotes)
AI 最新動態:ByteDance 開源了 UI-TARS-desktop,一個連接 AI 模型與 Agent 基礎設施的多模態 AI Agent Stack;同時 GitHub 上也出現了基於真實世界基準開發的 AI 程式設計 Agent 持久記憶架構新專案。
Bluesky@github-trending.bsky.social(GitHub Trending Bot,1 upvote)
慶祝!(500+ 新星標)bytedance/UI-TARS-desktop,⭐ 31,096(+850) ,TypeScript——開源多模態 AI Agent Stack:連接前沿 AI 模型與 Agent 基礎設施。

炒作指數

值得一試
4/5

行動建議

Try
用 7B-DPO 模型(4-bit 量化,12GB VRAM)在本地測試一個遺留系統的操作自動化,記錄成功率與每步延遲,對照 70–80% 基準評估是否符合你的場景需求
Build
整合 UI-TARS 的 MCP 介面,讓視覺操作能觸發內部 API 工具(如資料庫查詢、工單系統更新),建立「視覺感知 + 工具調用」的混合 Agent 工作流
Watch
追蹤 UI-TARS-2「All In One」Agent 模型發布時間表,以及 Agent TARS CLI Beta(預計 2025 年 6 月),評估整合 GUI + 代碼 + 工具調用後是否解決當前成功率瓶頸

趨勢快訊

COMMUNITY論述

Shel Silverstein 1981 年的寓言精準預言了 LLM 與幻覺現象

追整體趨勢LLM 幻覺問題尚未解決,建構可信 AI 應用仍需事實核查與人工審核作為工程防線
發布日期2026-05-10
補充連結Paleofuture - 分析 LLM 本質為精緻的自動補全,缺乏真正推理能力

重點資訊

1981 年的詩,2026 年的技術現實

Shel Silverstein 在 1981 年出版的詩集中,描述一台「最完美」的代做作業機器——投入一角硬幣、十秒內答案就出來。但問到「9 加 4 等於多少」時,機器自信地回答「三」,讓整個科技烏托邦瞬間崩塌。

2026 年,r/LocalLLaMA 社群重新翻出這首詩,指出它精準預言了 LLM 的核心缺陷:自信地輸出錯誤答案,即 AI 幻覺 (hallucination) 現象。

名詞解釋
AI 幻覺 (hallucination) :語言模型以高度自信的語氣輸出事實上不正確的內容,且自身無法察覺錯誤。

更深的警示:循環知識迴圈

Paleofuture 分析指出,LLM 本質是「精緻的自動補全」,缺乏真正的邏輯推理能力。

更令人憂慮的是循環知識迴圈的風險:學生用 ChatGPT 寫作業、老師用 ChatGPT 批改,正確資訊逐漸從網路消失,模型訓練資料也隨之劣化。

多元視角

實務觀點

幻覺問題在 2026 年仍未解決,頂尖模型在特定任務的幻覺率仍高達數十個百分點。工程師建構 LLM 應用時,不能假設輸出是事實可信的——RAG、事實核查層與人工審核節點仍是必要工程防線,而非可選配置。

產業結構影響

循環知識迴圈是隱性的結構性風險:企業大規模採用 LLM 生成文件與客戶回覆,若缺乏人工品質閘門,不只個別輸出有誤,更可能系統性地稀釋企業知識庫的可信度,長期侵蝕決策品質。

社群觀點

Reddit r/LocalLLaMA@u/Bakoro
如果我沒記錯,詩裡這台「機器」原本是在諷刺培根式科學方法 (Baconian Method) 。所以說這不是最恰當的例子,但同時又是最恰當的例子。
Reddit r/LocalLLaMA@u/tat_tvam_asshole
什麼是神燈精靈?什麼是猴掌?這些故事本來就是在寫人類搞砸 prompt engineering 的下場。
Reddit r/LocalLLaMA@u/waxroy-finerayfool
謝謝分享!
GITHUB生態

agentmemory:基於真實基準測試的 AI 編程 Agent 持久記憶方案

為 AI 編程 Agent 補上跨 session 持久記憶的基礎設施缺口,token 消耗節省達 92%,Apache-2.0 授權可直接落地企業工具鏈。
發布日期2026-05-10
補充連結LongMemEval-S 基準測試報告 - retrieval-only 指標說明與測試方法
補充連結LLM Wiki v2 — gist 社群討論 - 社群對 confidence scoring 機制的批評

重點資訊

什麼是 agentmemory

agentmemory 是開源持久記憶層,讓 Claude Code、Cursor 等 14+ AI 編程 Agent 在跨 session 中自動保留工程決策與上下文,無需每次重新說明。以 SQLite 為底層存儲,無外部資料庫依賴,透過 MCP 介面整合各平台。

白話比喻
就像給 AI 安裝工程師記憶晶片:新 session 自動注入上次的決策脈絡,不再每次從零開始。

四層記憶體架構

記憶體分四層,覆蓋即時觀察到跨 session 事實:

  • working memory(即時觀察)
  • episodic memory(session 摘要)
  • semantic memory(跨 session 事實)
  • procedural memory(工作流模式)

搜尋採 BM25 + vector embeddings + knowledge graph 三路 RRF 融合。LongMemEval-S 基準顯示 hybrid recall@5 達 95.2%,每 session 約 1,900 tokens,比直接貼全文 context 節省約 92%。

名詞解釋
LongMemEval-S:跨 session 記憶檢索基準,500 題,平均每題跨 48 個 sessions(約 11.5 萬 tokens)。

多元視角

開發者整合視角

透過 MCP 介面 (51 tools) 接入,底層 SQLite 可隨 repo 攜帶或複製,不需維護外部服務。12 個生命週期 hook 自動捕捉工具呼叫,免手動管理記憶。

值得注意:社群批評指出 LLM 不是可靠的無監督寫入者,confidence scoring 機制尚未明確定義。建議先以觀察模式運行,確認寫入行為後再開放自動寫入。

生態影響

3,400+ GitHub stars 代表「Agent 記憶」成為開發工具鏈的新基礎設施需求,Apache-2.0 授權可直接嵌入企業工具鏈。

每 session 約 $0.0027 的 token 成本(年費約 $10),對比直接 context dump 的數萬 tokens,ROI 明確。multi-agent namespace sharing 功能可讓跨工具記憶共用,減少重複工作。

驗證

效能基準(LongMemEval-S,retrieval-only)

  • Hybrid(BM25+Vector)recall@5:95.2%
  • Hybrid recall@10:98.6%
  • Hybrid recall@20:99.4%
  • BM25 alone recall@5:86.2%
  • 最強類別:knowledge-update(98.7%) 、multi-session reasoning(97.7%)
  • 最弱類別:preference-based questions(83.3%)

注意:此為 retrieval-only 指標,非端到端 QA 準確率。

社群觀點

X@ghumare64(agentmemory 作者)
正是如此。記憶是 AI 缺失的檔案系統。現在,每個 agent 每次 session 都從零開始——沒有持久性、沒有可攜性、沒有所有權。這就是為什麼我建了 agentmemory:一套開放的擴展記憶架構,跨 agent 和平台運作,不被任何單一工具綁死。
X@ghumare64(agentmemory 作者)
現在可以為 Claude Code 和 Codex 提供無限記憶,而且免費。agentmemory 剛剛發布——它記錄 Claude 在編程 session 中的操作,用 AI 壓縮後,再把相關上下文注入下次 session。CLAUDE.md 單次就會往 context 塞入 22,000+ tokens。
Hacker News@genunix64(HN 用戶)
我建了 Mnemory,一套開源的長期 AI agent 記憶層。目標是讓記憶比「把所有東西塞進 vector DB」更有結構——分別儲存事實、偏好、情節記憶、TTL、重要性,也提供 MCP server 介面。我之所以建這個,是因為持久事實和短期上下文需要不同處理方式,但許多系統把兩者混為一談。
Bluesky@dailygithubtrends.bsky.social(GitHub 趨勢追蹤帳號)
今日 GitHub 趨勢:rohitg00/agentmemory 是一套為 Claude Code、Cursor 等 AI 編程 Agent 提供持久記憶的工具。可在 session 間記住設定與過去的工程脈絡,省去反覆說明的麻煩。支援 MCP 與 REST API,可在不同 Agent 間共享記憶。
Bluesky@github-trending-js.bsky.social(GitHub JS/TS 趨勢追蹤帳號)
急速竄升!(單日新增 200+ stars)rohitg00/agentmemory 目前 2,538 顆星 (+257) ,TypeScript 專案,#1 基於真實基準測試的 AI 編程 Agent 持久記憶方案。
ALIBABA技術

千問 AI 眼鏡 S1 首創空間 3D 顯示,主動 Agent 直接在臉上執行

追整體趨勢空間 3D 顯示首次在 AI 眼鏡品類量產落地,若 Meta 等競品跟進,AI 穿戴硬體規格戰將全面升級;主動 Agent 模式也可能成為 AI 眼鏡的新互動標準。
發布日期2026-05-10
主要來源量子位
補充連結Gizmochina - 英文報導,聚焦主動 AI 功能與空間 3D 顯示升級細節

重點資訊

空間 3D 顯示:業界首創的立體疊加

阿里巴巴千問 (Qwen) 於 2026 年 5 月 8 日宣布對 AI 眼鏡 S1 進行重大升級,核心亮點為業界首創的「空間 3D 顯示」。

技術方案採「雙光機 + 雙目立體成像」,讓導航路線、通知卡片、字幕等資訊從平面疊加轉化為具備縱深感與層次感的立體呈現。目前 Meta、Google 等競品尚未公布同等規格。

名詞解釋
雙目立體成像:透過左右眼各接收略有差異的畫面,大腦合成出有深度感的立體影像,原理與人類雙眼視差相同。

主動 AI:從問答到主動預判

此次升級將 AI 定位從「被動應答」轉向「主動預判」,包括天氣提醒帶傘、偵測咖啡攝入、監測久坐。2026 年 5 月內即將上線的 Agent 功能涵蓋叫車、點外賣、查店鋪評分、買電影票、行程規劃,直接在臉上執行。

在中國市場,S1 以「夸克 AI 眼鏡 S1」品牌銷售,線上累計銷量佔國內 AI 眼鏡市場 53%,排名第一;起售價約 275 美元,低於 Meta Ray-Ban Gen 2 的 379 美元。

多元視角

工程師視角

雙光機方案的硬體複雜度遠高於單目設計,需解決左右眼畫面延遲同步、焦距匹配與頭部姿態補償等問題。目前官方未公布 SDK,若未來開放 Agent API,開發者可評估將「視野深度感知」作為空間 UI 的新輸入訊號;現階段仍是封閉實作,工程細節缺乏外部驗證。

商業視角

53% 市佔率加上低於 Meta Ray-Ban 約 28% 的定價,顯示阿里巴巴正以硬體規模換取生態系黏著度。主動 Agent 功能(叫車、外賣、電影票)與阿里旗下服務深度整合,強化平台鎖定效應;對 Meta 而言,硬體溢價策略在中國市場可能面臨更大壓力。

社群觀點

X@xavierdatatech(科技數據分析師 Xavier Mareca)
阿里巴巴在 MWC 2026 發布千問 AI 眼鏡。Meta Ray-Ban:799 美元;夸克 S1:536 美元;夸克 G1:262 美元。2026 年 AI 眼鏡市場預計超過 1,000 萬台,較 2025 年翻倍。中國剛把智慧眼鏡變成了一場價格戰。
X@eyishazyer
新款夸克 AI 眼鏡今天低調發布,但沒有人充分討論千問的部分。Meta 硬體實力強沒錯,但夸克正在做不同的事——把眼鏡變成真正的「AI 生活入口」。雙顯示器、極致亮度、快速拍攝。
BAIDU技術

百度發布文心 5.1:搜索能力登頂國內,預訓練成本僅為業界 6%

觀望彈性預訓練降本框架若開源,將對全球 AI 訓練成本結構產生示範效應;但 6% 成本聲稱仍待獨立驗證。
發布日期2026-05-10
主要來源量子位
補充連結36Kr
補充連結新浪科技
補充連結DoNews

重點資訊

彈性預訓練:一次訓練,多規模部署

文心 5.1 採用「多維彈性預訓練」技術,透過動態採樣機制,在單次預訓練中聯合最佳化具有不同深度、專家容量與路由稀疏度的子模型。壓縮涵蓋三個維度:彈性深度、彈性寬度、彈性專家容量,使同一次訓練得以產出多種規格的部署版本。

總參數量壓縮至文心 5.0 的約 1/3,激活參數壓縮至約 1/2,預訓練成本僅為業界同規模模型的 6%。

名詞解釋
「激活參數」指推理時實際運算的參數子集;文心 5.1 的彈性機制讓同一模型依規格需求激活不同數量的參數,兼顧效能與算力節省。

排行榜成績

發布當日,文心 5.1 以 1,223 分登上 LMArena 搜索榜中國第一、全球第四,為榜單上唯一上榜的國產大模型。

Preview 版本曾以 1,476 分奪下文本榜國內第一,超越 GPT-5.5 與 DeepSeek-V4-Pro。智慧體能力超越 DeepSeek-V4-Pro,創意寫作能力與 Gemini 3.1 Pro 同等水平。

多元視角

工程師視角

最值得關注的是「一次訓練、多規格輸出」的架構設計。彈性深度、寬度、專家容量三維壓縮不只降低預訓練成本,也讓同一訓練 run 能輸出多個不同規格的 checkpoint,避免重複預訓練的巨額算力浪費。

若百度開源技術細節,這套框架有望成為中小型 AI 實驗室降本的參考範本。

商業視角

以同規模模型 6% 的預訓練成本打進全球排行榜前四,百度向市場傳遞的訊號清楚:算力效率已成為中國 AI 廠商的核心競爭力。

搜索融合作為差異化切入點,能鞏固百度在國內搜索市場的護城河。但排行榜名次能否轉換為商業營收,仍取決於企業客戶採用率與獨立第三方驗證。

驗證

效能基準

  • LMArena 搜索榜:全球第 4、中國第 1(1,223 分)
  • LMArena 文本榜(Preview 版):中國第 1(1,476 分),超越 GPT-5.5 與 DeepSeek-V4-Pro
  • 智慧體能力:超越 DeepSeek-V4-Pro
  • 創意寫作:與 Gemini 3.1 Pro 同等水平
  • 預訓練成本:業界同規模模型的 6%

社群觀點

X@wicinternet(世界網際網路大會官方帳號)
百度發布文心一言 (Wenxin Yiyan)5.0,擁有 2.4 兆參數,能統一理解與生成文字、圖像、音頻與影片。該模型提升效率並強化中國的 AI 創新,有助提升其全球科技影響力。
X@AsianFinPress(NextFin.ai 財經科技媒體帳號)
百度 CEO 李彥宏:「沒有應用,AI 模型與晶片本質上毫無意義」——百度創辦人暨 CEO 李彥宏在武漢 Create 開發者大會上發出強烈警示:若沒有真實世界的應用,再先進的模型與晶片也毫無意義。
NVIDIA融資

Nvidia 今年已投入 400 億美元 AI 股權交易

追整體趨勢Nvidia 正從硬體供應商轉型為 AI 生態基石投資人,AI 公司的技術棧選擇與資本流向將愈加相互綁定。
發布日期2026-05-10
主要來源TechCrunch
補充連結CNBC - Nvidia AI 股權投資超過 400 億美元完整分析
補充連結Bloomberg - AI 循環交易深度圖解:Microsoft、OpenAI 與 Nvidia 資金流向

重點資訊

400 億美元:Nvidia 2026 年最大手筆

Nvidia 在 2026 年迄今已承諾逾 400 億美元的 AI 股權投資,其中最大筆是向 OpenAI 注入 300 億美元。其他重要投資包括 Anthropic 與 xAI,本週又接連與玻璃製造商 Corning 和資料中心營運商 IREN 達成共 53 億美元的投資權協議。

資本鏈閉環的隱憂

Nvidia 資產負債表上的私人股權部位,從一年前的 33.9 億美元暴增至 222.5 億美元,成長逾 6 倍。外界批評這是「循環交易」——Nvidia 投資客戶,客戶再用融資買 GPU,資金在同一批公司間流轉,被質疑是否真正創造外部價值。

多元視角

技術實力評估

Nvidia 同時扮演 GPU 供應商與股東,被投資的公司(OpenAI、Anthropic、xAI)也是最大算力採購方。此結構確保 CUDA 生態獲得持續最大算力投入,平台整合深度難以替代;但若循環模式泡沫化,真實算力需求訊號將被資本噪音遮蔽。

市場與投資觀點

「循環交易」讓 Nvidia 得以在供應商與股東兩個角色間套利——投資放大 GPU 採購需求,股權增值又回饋至資產負債表。Wedbush 分析師雖稱此模式「具競爭優勢潛力」,但外部投資人若難以評估真實現金流,高估值風險將持續累積。

社群觀點

Hacker News@dinfinity(HN 用戶)
AI 毫無疑問是電腦科學領域研究最多的主題。市值最高的 10 家公司中,只有 3 家沒有深入投入 AI 研發。依營收成長最快的公司(無論上市或私人),幾乎也全是以 AI 為核心的企業(Anthropic、OpenAI、xAI、Scale AI、Nvidia)。而且資金還不是最重要的部分——最關鍵的是心智佔有率與集體研究時間。
Bluesky@Dare Obasanjo(Bluesky 12 upvotes)
反對資料中心建設、阻礙 AI 公司滿足需求,是目前 AI 熱潮面臨的最大阻力。我預期將看到更多類似 Anthropic 向 xAI 租用舊資料中心的交易,以及更多探索 TPU 和 Nvidia 晶片等替代架構的努力。
Hacker News@WalterBright(HN 用戶)
如果我們當時那樣做了,就不會有 SpaceX、Nvidia、AI 等這些成就。
OPENAI融資

Broadcom 拒絕為 OpenAI 製造客製晶片,除非 Microsoft 買下四成產量

觀望Broadcom–OpenAI 客製晶片融資條件懸而未決,Microsoft 是否背書將決定 OpenAI 自研算力路線能否在 2027 年如期落地。
發布日期2026-05-10
主要來源The Decoder
補充連結Investing.com - 市場反應與 Broadcom 股價分析

重點資訊

融資僵局:Broadcom 要求 Microsoft 背書

OpenAI 客製晶片計畫「Jalapeno」遭遇重大融資障礙。Broadcom 拒絕為首批生產提供約 180 億美元融資,除非 Microsoft 承諾購買約 40% 的晶片產量。

名詞解釋
Leaseback(售後租回):Microsoft 先買下晶片並安裝在自有資料中心,再以租賃方式提供給 OpenAI 使用,讓 OpenAI 規避直接的大額資本支出。

背後邏輯

Broadcom 需要 Microsoft 的信用評等作為擔保,才有信心回收 180 億美元投資——OpenAI 本身尚不具備此等信用背書能力。Microsoft 目前保留拒絕選項,一旦拒絕,融資條款將重新談判。

OpenAI 主管 Sachin Katti 坦言,長期依賴 Microsoft 在財務上「毫無吸引力」,但眼前的算力規模需求(Nexus 計畫目標 10 GW 資料中心容量、晶片成本估計達 1,800 億美元)迫使雙方仍需協商。

多元視角

技術實力評估

Jalapeno 晶片設計目標是比 Nvidia 硬體更有效率地執行 OpenAI 模型,預計 2027 年量產,首批部署規模達 1.3 GW。融資談判僵局意味著工程時程存在高度不確定性——若 Microsoft 拒絕,整個量產計畫須重啟談判,技術團隊前期投入的設計資源面臨停擺風險。

市場與投資觀點

Broadcom 股價當天下跌約 4%,市場對這筆大單能否落地持懷疑態度。更深層的矛盾是:OpenAI 超大規模資本支出計畫(2029 年前逾 2,000 億美元)高度依賴 Microsoft 背書,但 OpenAI 同時急於擺脫這種財務依賴。SoftBank 貸款從 100 億縮減至 60 億更加劇資金壓力,短期內難有解套空間。

社群觀點

X@gdb(Greg Brockman,OpenAI 共同創辦人)
宣布與 @Broadcom 合作製造 OpenAI 晶片。這項合作建立在我們過去數週與 @nvidia 和 @AMD 宣布的合作之上,將讓我們針對特定工作負載客製化效能。世界需要更多算力。
Hacker News@aurareturn(HN 用戶)
ASML 是我聽說的較大瓶頸之一。他們的訂單已排滿好幾年,就算 Intel 想建更多晶圓廠也辦不到。基本上存在多個風險層級,每一層對 AGI 的篤信程度不同,越往下走瓶頸和供應限制就越嚴重。第一層是 OpenAI/Anthropic——他們對 AGI 極度篤信,認為這是必然實現之事,因此想預購下層所有資源。
X@anissagardizy8(The Information 科技記者)
獨家:當 OpenAI 和 Broadcom 宣布共同打造 10 GW 客製 AI 晶片時,他們把這件事描述成已拍板定案。但他們沒說的是,OpenAI 要如何付款根本還沒想好。幾個月後,雙方才開始談判由 Broadcom 提供融資的協議。
OPENAI技術

OpenAI 翁家翌提出不更新參數的強化學習新範式:決策只需手搓一個 .py 檔

追整體趨勢啟發式學習提供了不依賴 GPU 訓練的策略迭代路徑,長期可能重塑機器人控制與自動化任務的開發方式,但當前仍限於規則可描述的任務場景。

重點資訊

啟發式學習:策略變成可讀程式碼

OpenAI 研究員翁家翌於 2026 年 5 月提出啟發式學習(Heuristic Learning,HL):將強化學習的策略從神經網路權重,改以可執行 Python 程式碼儲存(規則、狀態機、模型預測控制等)。

更新機制同樣顛覆傳統——取代梯度下降的,是 AI Coding Agent(如 GPT-5.4 Codex)讀取多通道回饋後直接修改 .py 策略檔。整個學習迴圈「全程無神經網路訓練、無梯度更新」。

名詞解釋
啟發式學習 (HL) :以可讀 Python 程式碼取代神經網路作為策略載體,由 AI Coding Agent 迭代編輯,取代反向傳播。

翁家翌將 HL 定位為繼 pretraining、RLHF、大規模 RL 之後的下一個學習範式,核心哲學是:把持續學習從「如何更新參數」轉變為「如何維護一個持續吸收回饋的軟體系統」。

實測效能亮點

  • Atari 57 全套中位 HNS 達 0.83,與 PPO 相當
  • Breakout 打出 864 分理論滿分(起點 387)
  • MuJoCo 四足機器人突破 6,000 分,HalfCheetah 均分 11,836.7

多元視角

工程師視角

HL 最直接的工程意義:策略可版本控制、可單元測試、可 code review。迭代不需 GPU 叢集,只需呼叫 Coding Agent API。

當前適合「規則可描述」的任務(遊戲、機器人步態控制);翁家翌本人坦言 ImageNet 這類感知任務仍需神經網路。非感知任務上,現在就可以嘗試用 GPT-4.1 替代梯度下降做策略迭代。

商業視角

HL 大幅降低策略開發的算力門檻——不需 GPU 訓練預算,只需 API 呼叫成本。

更關鍵的是,策略以程式碼存在代表可被審計、可向監管機構解釋,符合金融、醫療等高合規要求行業的需求。作為 2026 年 5 月剛發表的早期範式,商業產品落地時程尚待觀察。

驗證

效能基準

  • Atari 57 全套:中位 HNS 0.83(共 342 條搜尋軌跡)
  • Breakout:理論滿分 864 分(起點 387)
  • MuJoCo Ant:6,000+ 分(CPG 步態 + 短程 MPC)
  • MuJoCo HalfCheetah:均分 11,836.7
  • VizDoom D3:均分 557.0(純電腦視覺,無神經網路訓練)

社群觀點

Bluesky@zaqdelinguist.bsky.social(6 likes)
這在深度強化學習演算法中至少從 2016/2018 年前後就已存在了。這些人 (OpenAI/Anthropic) 研究做得很差,部分原因是他們對自己領域裡 LLM 以外實際發生的事情一無所知。
HN@rororournouh
據我了解,Anthropic 使用一種叫做憲法 AI 的方法,其中有一份列明可取與不可取特質的核心文件(以及強化學習),而 OpenAI 更依賴人類訓練師直接評估回應、模型根據這些偏好來學習。我目前也更偏好 Claude 的輸出。
GOOGLE論述

Google「偏好來源」功能:為搜尋品質開了一扇後門?

追整體趨勢搜尋品質問責重心轉移,Publisher 需將讀者忠誠度經營納入 SEO 核心策略。
發布日期2026-05-10
主要來源The Decoder
補充連結Google Blog
補充連結Publytics

重點資訊

功能概覽

Google 的 Preferred Sources(偏好來源)功能,讓用戶在 Top Stories 區塊主動標記信任的新聞網站,標記後該網站曝光率提升,並出現在專屬「From your sources」區塊。2025 年底於英語地區測試,2026 年 4 月底正式擴展至所有支援語言,全球上線。

名詞解釋
Top Stories:Google 搜尋結果頂端的新聞輪播區塊,由相關性與新鮮度演算法排序。

爭議核心:品質修復還是責任外包?

官方敘事是「讓用戶掌控來源選擇權」,但 The Decoder 批評指出:Google 擁有數十年用戶行為數據,完全有能力在演算法層面優化可信來源——此功能的推出,本質是選擇讓用戶自己決定,而非修復搜尋品質的根本問題。

在歐盟 DSA(數位服務法)與 DMA(數位市場法)監管壓力下,此功能也為 Google 提供有利抗辯:既然用戶可自行選擇,「預設搜尋品質低落」的問責難度便大幅上升。

多元視角

實務觀點

對 SEO 從業者而言,這是 Top Stories 排名因子的質變:「被讀者主動標記」成為直接影響曝光的新信號,凌駕傳統反向連結策略。功能僅支援 domain 與 subdomain 層級(不支援子目錄),Publisher 可透過 deeplink 引導既有讀者主動選擇,CTR 提升達 2 倍的數據為品牌忠誠度 ROI 提供了新量化基準。

產業結構影響

Preferred Sources 在監管層面為 Google 提供策略緩衝:用戶自選機制讓「預設品質問責」在 DSA 與 DMA 框架下更難成立。對媒體業而言,超過 200,000 個網站已被加入清單,競爭賽道從 SEO 最佳化轉向品牌忠誠度——資源有限的地方媒體若無法留存讀者,長期排名劣勢恐將加劇。

驗證

功能數據

  • 已加入偏好清單的獨立網站:200,000+
  • 超過半數 Google Labs 測試用戶選擇 4 個以上來源
  • 標記後點擊率 (CTR) 提升:2 倍

社群觀點

X@glenngabe(G-Squared Interactive SEO 分析師)
Google 的新「偏好來源」測試功能非常有趣,凸顯了打造受眾群體、品牌知名度與良好聲譽的重要性。在 Top Stories 點擊星號後,你可以選擇偏好的網站;重新載入後,Top Stories 就會顯示那些來源。
X@aleyda(Orainti SEO 顧問)
各媒體注意:現在是時候請你的用戶或讀者,將你的網站加入 Top Stories 的偏好來源了。本週稍早 Google 在美國和印度推出了偏好來源功能,讓用戶可以選擇 Top Stories 要顯示哪些新聞來源。

社群風向

社群熱議排行

本日最高單則互動:kelatonin.bsky.social 以 1,068 讚諷刺 GPT-5.5 加了「地精限制器」,折射出社群對新模型的複雜情緒。

GitHub 上 UI-TARS-desktop 單日新增 850 星(累計 31,096),agentmemory 單日 +257 星,顯示「桌面 Agent 基礎設施」成為本週開發者最熱追的方向。

Reddit r/LocalLLaMA 圍繞 Qwen3.6-35B 本地推理掀起論戰——12GB 顯卡到底能不能跑?社群多篇實測貼文引發數百則回覆。

技術爭議與分歧

@mattshumer_(HyperWrite CEO,X)使用 GPT-5.5 數週後直言:「這是一次巨大的飛躍,但對 99% 的用戶來說可能並不重要,而且有一個讓人非常沮喪的重大退步。」社群對「誰真正受益」的爭論由此點燃。

Reddit r/LocalLLaMA 對本地推理分歧明顯:u/janvitos 指出「12GB VRAM 根本不可能跑整個模型」,u/tarruda 則實測 MTP 加速後速度從 17 tok/s 提升至 25 tok/s——同一個模型,截然不同的使用現實。

Bluesky 上 zaqdelinguist(6 likes) 直批翁家翌的「無參數更新強化學習」:「這在深度 RL 中至少從 2016 年前後就已存在——這些人對自己領域裡 LLM 以外實際發生的事情一無所知。」

實戰經驗(最高價值)

u/tarruda(Reddit r/LocalLLaMA) :實測 Qwen3 27B 搭配 MTP,速度從約 17 tok/s 提升至 ~25 tok/s——消費級硬體上首批有完整數據支撐的 MTP 加速報告。

withinrafael(HN) :「我在使用 UI-TARS 模型生成座標和回答問題方面取得了很大的成功。」驗證了 7B 視覺模型在實際桌面自動化場景的可用性。

@ghumare64(agentmemory 作者,X):CLAUDE.md 單次會往 context 塞入 22,000+ tokens;agentmemory 用 AI 壓縮後 token 消耗節省達 92%,跨 session 注入相關上下文。

未解問題與社群預期

@mattshumer_(X) 提到 GPT-5.5 有「讓人非常沮喪的重大退步」,卻未說明具體是什麼——HN 與 X 社群紛紛追問,OpenAI 至今未正式回應。

Broadcom–OpenAI 客製晶片融資條件懸而未決:@anissagardizy8(The Information) 踢爆「拍板定案」公告背後連付款方式都沒談好,Microsoft 是否背書成為 2027 年算力路線的關鍵未解變數。

dijit(HN) :「LLMs 現在能捕捉意圖了,跟『AI 有情感了,我的 AI 女友說的』沒什麼兩樣。」情緒 AI 科學基礎的爭議,EU AI Act 2026 年 8 月執法前恐怕難有定論。

行動建議

Try
用 ChatGPT 5.5 Pro 挑戰自己研究領域的一道開放問題,觀察模型在零提示條件下的推理策略與技術組合
Build
設計「AI 輔助研究流程」:問題形式化 → 模型推理 → 人工逐步驗證 → Lean 形式化確認,建立可重複的研究管線
Watch
追蹤 2026 年首批通過主流數學期刊同儕審查的 AI 輔助論文,以及學術界對 AI 貢獻著作權的規範共識進展
Try
若你有 RTX 3090 或等效 24GB 顯卡,下載 Qwen3.6-35B-A3B Q4_K_M GGUF 並搭配 --spec-type mtp --spec-draft-n-max 4 測試 MTP 加速效果,確認 tok/s 是否達到預期 1.5× 以上
Build
評估 BeeLlama.cpp 的 TurboQuant 是否適合你的長上下文場景——若需要 128K+ 上下文,TurboQuant 是目前消費級硬體上最可行的方案,值得建立測試環境驗證
Watch
追蹤 llama.cpp PR #22673 的 MTP 正式合入進度與 TurboQuant 是否進入主線——一旦穩定版合入,配置複雜度將大幅降低,維護風險也隨之減少
Try
閱讀 EU AI Act 對情緒辨識系統的具體條款(FPF 解析文章),評估你所在地區的合規義務與時程
Build
若開發 HR 科技或員工監控工具,在設計層明確區分「行為數據記錄」與「情緒狀態推斷」,後者在多數司法管轄區已踩上紅線
Watch
追蹤各國將情緒數據列入生物特徵敏感資料的立法進展,及 2026 年 8 月 EU AI Act 全面執法後的第一批執法案例
Try
用 7B-DPO 模型(4-bit 量化,12GB VRAM)在本地測試一個遺留系統的操作自動化,記錄成功率與每步延遲,對照 70–80% 基準評估是否符合你的場景需求
Build
整合 UI-TARS 的 MCP 介面,讓視覺操作能觸發內部 API 工具(如資料庫查詢、工單系統更新),建立「視覺感知 + 工具調用」的混合 Agent 工作流
Watch
追蹤 UI-TARS-2「All In One」Agent 模型發布時間表,以及 Agent TARS CLI Beta(預計 2025 年 6 月),評估整合 GUI + 代碼 + 工具調用後是否解決當前成功率瓶頸

今天的 AI 社群同時在三個戰場角力:研究前沿(GPT-5.5 博士級數學)、硬體民主化(12GB 跑 35B)、倫理紅線(情緒 AI 入侵職場)。

共同主軸是「基礎設施補課」——agentmemory 補記憶、UI-TARS 補視覺操作、llama.cpp MTP 補速度,Agent 時代的地基正在這一週密集澆灌。

Broadcom 拒絕替 OpenAI 造晶片、Nvidia 砸 400 億搶佔 AI 生態位——算力政治的格局正在悄悄重組,而這才是影響未來三年 AI 研發走向的真正變數。