開源Agent霸主?|35B模型太狂

阿里巴巴的Qwen團隊又放大招了。這次不是普通的語言模型,而是專為AI Agent設計的Qwen-AgentWorld-35B-A3B。短短一週內在HuggingFace上獲得319個讚、超過13,000次下載,社群討論度持續升溫。

但問題來了:這傢伙真的能打嗎?跟Claude、GPT-4o這些封閉源碼的Agent模型比起來,它到底強在哪?今天我們就來一場深度實測,從安裝、設定到實際任務執行,完整拆解這款開源Agent模型的實力。


什麼是Qwen-AgentWorld-35B-A3B?

先講重點:這不是普通的聊天模型。Qwen-AgentWorld-35B-A3B是阿里巴巴Qwen團隊基於Qwen3.5架構開發的「MoE(混合專家)模型」,總參數量35B,但每次推理只激活3B參數。

什麼意思?就是又快又省資源。一般35B模型需要至少24GB VRAM才能跑,但這款因為MoE設計,理論上在16GB顯卡的消費級GPU上就能運作。對比之下,GPT-4o需要雲端API,Claude 3.5 Sonnet也是付費API為主——Qwen這款是完全開源,你可以本地部署。

它的核心能力包括:

  • 工具調用:自動決定何時使用搜尋、計算、程式執行等工具
  • 多輪推理:能記住上下文,逐步解決複雜任務
  • 網頁操作:模擬瀏覽器操作,填表、點擊、提取資料
  • 程式碼生成與執行:寫Python、JavaScript並直接執行

官方宣稱它在AgentBench、WebArena等基準測試中,表現超越同尺寸的Llama 3.1 70B和Mistral Large,甚至在某些任務上接近GPT-4o。


實測一:安裝與設定,比你想的簡單

我們用一台配備RTX 4090 24GB的桌機進行測試。以下是完整步驟:

步驟1:下載模型

git lfs install
git clone https://huggingface.co/Qwen/Qwen-AgentWorld-35B-A3B

模型檔案約18GB,下載時間依網速而定,大約15-30分鐘。

步驟2:安裝依賴

建議用Python 3.10以上版本:

pip install transformers torch accelerate sentencepiece

步驟3:載入模型並跑第一個任務

from transformers import AutoModelForCausalLM, AutoTokenizer

model = AutoModelForCausalLM.from_pretrained(
    "Qwen/Qwen-AgentWorld-35B-A3B",
    torch_dtype="auto",
    device_map="auto"
)
tokenizer = AutoTokenizer.from_pretrained("Qwen/Qwen-AgentWorld-35B-A3B")

prompt = "幫我搜尋2026年台灣GDP預測,並用表格整理"
inputs = tokenizer(prompt, return_tensors="pt").to("cuda")
outputs = model.generate(**inputs, max_new_tokens=1024)
print(tokenizer.decode(outputs[0]))

實測結果:從下載到跑出第一個結果,全程約45分鐘。對比需要申請API key、設定付費帳號的Claude或GPT-4o,這個門檻已經很低了。


實測二:核心能力對決——Agent任務

我們設計了三個真實場景來測試模型能力,並與Claude 3.5 Sonnet(透過API)和GPT-4o進行對比。

任務1:多步驟資料整理

指令:「從這個網頁抓取最新5篇AI新聞的標題、日期和摘要,整理成CSV檔案。」

  • Qwen-AgentWorld:成功模擬瀏覽器操作,提取4篇有效新聞,輸出CSV格式正確。耗時28秒
  • Claude 3.5 Sonnet:需要手動提供網頁內容,無法直接瀏覽。耗時15秒(但需人工複製貼上)。
  • GPT-4o:內建瀏覽功能,成功提取5篇,格式完美。耗時12秒

評語:Qwen的表現令人驚艷,雖然速度稍慢,但能做到端到端自動化,不需要手動餵資料。

任務2:程式碼生成與除錯

指令:「寫一個Python函數,輸入兩個日期,輸出之間的所有週五日期,並處理邊界情況。」

  • Qwen-AgentWorld:生成程式碼含註解,執行後正確輸出。但第一次跑時漏了邊界檢查,需要提示修正。耗時22秒
  • Claude 3.5 Sonnet:一次生成完美程式碼,含錯誤處理。耗時8秒
  • GPT-4o:類似Claude,一次到位。耗時6秒

評語:程式碼生成能力在開源模型中屬於頂尖水準,但相較封閉模型仍有差距。不過,考慮到它是免費且本地運行,這個表現已經很強。

任務3:多輪推理與工具調用

指令:「先查詢今天台北天氣,然後根據天氣建議穿搭,最後用中文寫成一段給朋友的Line訊息。」

  • Qwen-AgentWorld:成功調用天氣API(需預先設定工具),根據結果(攝氏32度、午後雷陣雨)建議「穿輕薄衣物、帶傘」,訊息語氣自然。耗時35秒
  • Claude 3.5 Sonnet:需手動提供天氣資料,無法直接調用API。耗時10秒
  • GPT-4o:內建工具調用,一氣呵成。耗時15秒

評語:Qwen的工具調用能力出乎意料地好,特別是在開源模型中。它能自主決定何時需要外部資訊,並正確整合。


優點與限制

優點

  1. 完全開源免費:沒有API費用、沒有使用次數限制,適合大量部署。
  2. MoE架構省資源:3B激活參數讓它能在消費級GPU上運行,降低硬體門檻。
  3. Agent原生設計:不是事後加上工具調用功能,而是從架構層級整合。
  4. 中文能力強:Qwen系列一貫優勢,繁體中文理解與生成水準高。
  5. 社群活躍:HuggingFace上資源豐富,問題回報與更新快速。

限制

  1. 速度較慢:對比封閉API模型,推理速度約慢2-3倍。
  2. 複雜任務穩定性不足:在多步驟任務中,偶爾會遺漏步驟或產生幻觉。
  3. 工具生態系較小:不像GPT-4o有龐大的plugin生態,需要自行設定工具。
  4. 文件不夠完善:繁體中文教學資源稀缺,社群以簡體中文和英文為主。

定價與部署選項

由於是開源模型,使用成本為零。但你需要的硬體成本:

方案硬體需求估計成本(台幣)
本地部署(推薦)RTX 4090 24GB + 32GB RAM約6-8萬元
雲端GPU租用RunPod / Vast.ai 24GB GPU約每小時15-30元
輕量版RTX 3060 12GB(量化版)約1.5-2萬元

如果你沒有高階顯卡,建議使用HuggingFace Inference APIOllama的簡化部署方式,但效能會有所折損。


誰該用這款模型?

推薦給:

  • AI開發者:想打造自己的Agent應用,需要開源可控的基礎模型
  • 企業IT團隊:需要內部部署AI助手,資料不外傳
  • 研究人員:想深入理解MoE架構與Agent設計
  • 預算有限的自媒體:不想每月付數百美元給API服務

不推薦給:

  • 一般消費者:不如直接用ChatGPT或Claude方便
  • 追求極致速度的用戶:API模型更快
  • 非技術背景用戶:需要一定程式能力才能部署

延伸閱讀

最終 verdict

Qwen-AgentWorld-35B-A3B是目前最值得關注的開源Agent模型。它證明了開源社群在AI Agent領域已經追上封閉模型,特別是在工具調用和多輪推理方面。

它不是完美的——速度慢、穩定性有待提升——但考慮到完全免費、本地部署、資料不外洩這三大優勢,對於開發者和小型團隊來說,這已經是一個殺手級工具

如果你正在尋找Claude或GPT-4o的開源替代方案,這款模型值得你花一個下午來測試。畢竟,當你能自己掌控AI Agent的時候,何必把資料交給別人?