adtestbench Higgsfield
繁中

AI 新聞・Shopify Shop MCP・AI 購物代理

同一份 Shopify 清單,三個 Claude 模型挑出不同商品

面對 Shopify 型錄中同樣的 20 項商品,Haiku、Sonnet 與 Opus 在六次搜尋中,第一選擇從未一致。

作者:Alexandre S. ,00:30 UTC

AI 購物代理會把訂單給哪家商店,可能取決於底層用的模型。在2026 年 11 月 2 日發表的一項實驗中,最佳化顧問 Slobodan Manić 針對從咖啡豆到瑜伽墊的六個日常搜尋,存下 Shopify 的前 20 筆結果,請 Claude Haiku 4.5、Sonnet 5 與 Opus 5 為購物者各選一件商品購買,每個模型每次搜尋重複 50 次;並沒有真的下單。沒有任何一次搜尋,三個模型選出同一個首選。

復古未來風插畫:星空下,條紋夕陽映照格線地平線,地平線上矗立著一台購物車。
adtestbench 根據 「3 AI Models Shopped Shopify's Catalog, Each Picked A Different Winner」繪製,

他透過 Shop MCP 取得清單;Shopify 在 10 月推出的 Shop MCP 是一條單一連線,讓任何代理從搜尋一路走到完成 Shop Pay 結帳,涵蓋超過十億件目錄商品,搜尋不需要 API 金鑰。

各模型自己的表現很穩定。Haiku 平均把 67% 的選擇給了它的首選,Opus 是 89%,Sonnet 是 94%。Haiku 與 Sonnet 傾向選評論數最多的商品。這讓目錄中顯示 447,221 則評論、滿分的 nobl 水壺占了優勢,但 Manić 查看時,nobl 自家商品頁只有 6,537 則。Opus 在 300 次回答中,有 222 次形容自己的選擇安全或最安全。

Manić 是透過 Claude Code 執行這些模型;依我們 11 月 2 日的確認,Claude Pro 每月 20 美元就附 Claude Code。他沒說自己用哪個方案,也沒說 1,980 次選擇用掉多少用量。

Haiku 與 Sonnet 約有一半的選擇給了評論數最多的商品,因此 Shopify 目錄中的評論數(本例約為 nobl 自家商品頁的 68 倍),就是 Shop MCP 上的商家最該檢查的數字。