開源Agent霸主?|35B模型太狂
阿里巴巴的Qwen團隊又放大招了。這次不是普通的語言模型,而是專為AI Agent設計的Qwen-AgentWorld-35B-A3B。短短一週內在HuggingFace上獲得319個讚、超過13,000次下載,社群討論度持續升溫。
但問題來了:這傢伙真的能打嗎?跟Claude、GPT-4o這些封閉源碼的Agent模型比起來,它到底強在哪?今天我們就來一場深度實測,從安裝、設定到實際任務執行,完整拆解這款開源Agent模型的實力。
什麼是Qwen-AgentWorld-35B-A3B?
先講重點:這不是普通的聊天模型。Qwen-AgentWorld-35B-A3B是阿里巴巴Qwen團隊基於Qwen3.5架構開發的「MoE(混合專家)模型」,總參數量35B,但每次推理只激活3B參數。
什麼意思?就是又快又省資源。一般35B模型需要至少24GB VRAM才能跑,但這款因為MoE設計,理論上在16GB顯卡的消費級GPU上就能運作。對比之下,GPT-4o需要雲端API,Claude 3.5 Sonnet也是付費API為主——Qwen這款是完全開源,你可以本地部署。
它的核心能力包括:
- 工具調用:自動決定何時使用搜尋、計算、程式執行等工具
- 多輪推理:能記住上下文,逐步解決複雜任務
- 網頁操作:模擬瀏覽器操作,填表、點擊、提取資料
- 程式碼生成與執行:寫Python、JavaScript並直接執行
官方宣稱它在AgentBench、WebArena等基準測試中,表現超越同尺寸的Llama 3.1 70B和Mistral Large,甚至在某些任務上接近GPT-4o。
實測一:安裝與設定,比你想的簡單
我們用一台配備RTX 4090 24GB的桌機進行測試。以下是完整步驟:
步驟1:下載模型
git lfs install
git clone https://huggingface.co/Qwen/Qwen-AgentWorld-35B-A3B
模型檔案約18GB,下載時間依網速而定,大約15-30分鐘。
步驟2:安裝依賴
建議用Python 3.10以上版本:
pip install transformers torch accelerate sentencepiece
步驟3:載入模型並跑第一個任務
from transformers import AutoModelForCausalLM, AutoTokenizer
model = AutoModelForCausalLM.from_pretrained(
"Qwen/Qwen-AgentWorld-35B-A3B",
torch_dtype="auto",
device_map="auto"
)
tokenizer = AutoTokenizer.from_pretrained("Qwen/Qwen-AgentWorld-35B-A3B")
prompt = "幫我搜尋2026年台灣GDP預測,並用表格整理"
inputs = tokenizer(prompt, return_tensors="pt").to("cuda")
outputs = model.generate(**inputs, max_new_tokens=1024)
print(tokenizer.decode(outputs[0]))
實測結果:從下載到跑出第一個結果,全程約45分鐘。對比需要申請API key、設定付費帳號的Claude或GPT-4o,這個門檻已經很低了。
實測二:核心能力對決——Agent任務
我們設計了三個真實場景來測試模型能力,並與Claude 3.5 Sonnet(透過API)和GPT-4o進行對比。
任務1:多步驟資料整理
指令:「從這個網頁抓取最新5篇AI新聞的標題、日期和摘要,整理成CSV檔案。」
- Qwen-AgentWorld:成功模擬瀏覽器操作,提取4篇有效新聞,輸出CSV格式正確。耗時28秒。
- Claude 3.5 Sonnet:需要手動提供網頁內容,無法直接瀏覽。耗時15秒(但需人工複製貼上)。
- GPT-4o:內建瀏覽功能,成功提取5篇,格式完美。耗時12秒。
評語:Qwen的表現令人驚艷,雖然速度稍慢,但能做到端到端自動化,不需要手動餵資料。
任務2:程式碼生成與除錯
指令:「寫一個Python函數,輸入兩個日期,輸出之間的所有週五日期,並處理邊界情況。」
- Qwen-AgentWorld:生成程式碼含註解,執行後正確輸出。但第一次跑時漏了邊界檢查,需要提示修正。耗時22秒。
- Claude 3.5 Sonnet:一次生成完美程式碼,含錯誤處理。耗時8秒。
- GPT-4o:類似Claude,一次到位。耗時6秒。
評語:程式碼生成能力在開源模型中屬於頂尖水準,但相較封閉模型仍有差距。不過,考慮到它是免費且本地運行,這個表現已經很強。
任務3:多輪推理與工具調用
指令:「先查詢今天台北天氣,然後根據天氣建議穿搭,最後用中文寫成一段給朋友的Line訊息。」
- Qwen-AgentWorld:成功調用天氣API(需預先設定工具),根據結果(攝氏32度、午後雷陣雨)建議「穿輕薄衣物、帶傘」,訊息語氣自然。耗時35秒。
- Claude 3.5 Sonnet:需手動提供天氣資料,無法直接調用API。耗時10秒。
- GPT-4o:內建工具調用,一氣呵成。耗時15秒。
評語:Qwen的工具調用能力出乎意料地好,特別是在開源模型中。它能自主決定何時需要外部資訊,並正確整合。
優點與限制
優點
- 完全開源免費:沒有API費用、沒有使用次數限制,適合大量部署。
- MoE架構省資源:3B激活參數讓它能在消費級GPU上運行,降低硬體門檻。
- Agent原生設計:不是事後加上工具調用功能,而是從架構層級整合。
- 中文能力強:Qwen系列一貫優勢,繁體中文理解與生成水準高。
- 社群活躍:HuggingFace上資源豐富,問題回報與更新快速。
限制
- 速度較慢:對比封閉API模型,推理速度約慢2-3倍。
- 複雜任務穩定性不足:在多步驟任務中,偶爾會遺漏步驟或產生幻觉。
- 工具生態系較小:不像GPT-4o有龐大的plugin生態,需要自行設定工具。
- 文件不夠完善:繁體中文教學資源稀缺,社群以簡體中文和英文為主。
定價與部署選項
由於是開源模型,使用成本為零。但你需要的硬體成本:
| 方案 | 硬體需求 | 估計成本(台幣) |
|---|---|---|
| 本地部署(推薦) | RTX 4090 24GB + 32GB RAM | 約6-8萬元 |
| 雲端GPU租用 | RunPod / Vast.ai 24GB GPU | 約每小時15-30元 |
| 輕量版 | RTX 3060 12GB(量化版) | 約1.5-2萬元 |
如果你沒有高階顯卡,建議使用HuggingFace Inference API或Ollama的簡化部署方式,但效能會有所折損。
誰該用這款模型?
推薦給:
- AI開發者:想打造自己的Agent應用,需要開源可控的基礎模型
- 企業IT團隊:需要內部部署AI助手,資料不外傳
- 研究人員:想深入理解MoE架構與Agent設計
- 預算有限的自媒體:不想每月付數百美元給API服務
不推薦給:
- 一般消費者:不如直接用ChatGPT或Claude方便
- 追求極致速度的用戶:API模型更快
- 非技術背景用戶:需要一定程式能力才能部署
延伸閱讀
最終 verdict
Qwen-AgentWorld-35B-A3B是目前最值得關注的開源Agent模型。它證明了開源社群在AI Agent領域已經追上封閉模型,特別是在工具調用和多輪推理方面。
它不是完美的——速度慢、穩定性有待提升——但考慮到完全免費、本地部署、資料不外洩這三大優勢,對於開發者和小型團隊來說,這已經是一個殺手級工具。
如果你正在尋找Claude或GPT-4o的開源替代方案,這款模型值得你花一個下午來測試。畢竟,當你能自己掌控AI Agent的時候,何必把資料交給別人?