逐請求供應商競價
供應商會針對每個模型按 token 報價,請求會發送至符合客戶所選規則的最低價供應商。
Liquid Inference 是大型語言模型請求的推論路由器與競價交易平台。它讓多家供應商針對請求競價,接著選出符合客戶指定模型、地區、速度與最低品質要求的最低價方案。
這項服務旨在融入現有的 API 工作流程:其網站記載可透過單一基礎 URL 搭配 Liquid Inference API 金鑰使用 OpenAI Chat Completions 與 Anthropic Messages。它也提供請求成本資訊、供應商品質衡量結果,以及市場價格歷史資料,供客戶評估或管理推論支出。
供應商會針對每個模型按 token 報價,請求會發送至符合客戶所選規則的最低價供應商。
客戶可以指定模型、地區、速度與最低品質要求,用來決定哪些供應商符合資格。
價格上限會在生成開始前設定,因此在第一個 token 產生前即可得知請求的最高成本。計費依產生的 token 計算,輸入 token 另行定價。
服務為 OpenAI Chat Completions 與 Anthropic Messages 提供單一基礎 URL,讓相容的現有用戶端只需變更端點與 API 金鑰,而不必重建請求工作流程。
Liquid Inference 表示會定期使用標準基準測試供應商,並發布測得的品質數據以供比較。
客戶可以查看逐項請求成本,並下載模型的即時與歷史價格,以協助檢視成本與安排工作負載時機。
擁有現成 OpenAI 或 Anthropic 相容應用程式的團隊,可以變更 API 基礎 URL 與 API 金鑰,在保留原有用戶端工作流程的同時測試供應商競爭。
工程團隊可以為重視成本、但請求仍需符合營運或輸出要求的工作負載,設定模型、地區、速度與最低品質規則。
營運或財務團隊可以檢視逐項請求費用,並利用即時或歷史價格資訊比較模型成本,決定何時發送工作負載。
AI 基礎架構供應商可以註冊部署、提交審查、連線代理程式並自行報價,也能透過停止報價或變更價格來控制負載。
使用 Claude Code、Codex、Cursor、LiteLLM、LangChain 或以 SDK 為基礎之用戶端等相容工具的開發者,可以將支援的工作流程指向共用路由器端點。
Liquid Inference 為 OpenAI Chat Completions 與 Anthropic Messages 提供路由器端點。網站表示,現有用戶端只要變更基礎 URL 並提供 Liquid Inference API 金鑰即可使用這項服務。
對每個請求,供應商會針對選定模型報價。Liquid Inference 會套用客戶的規則,包括模型、地區、速度與最低品質,並將請求路由至符合這些條件的最低價供應商。
服務會在生成開始前顯示請求的最高價格。客戶需依請求產生的 token 計費,而輸入 token 與輸出 token 分開定價。
網站列出相容 OpenAI 與相容 Anthropic 的 API 工作流程,並列出 Claude Code、Codex、Cursor、OpenAI SDK、Anthropic SDK、LiteLLM、LangChain 與 Vercel AI SDK 等用戶端與工具。來源未提供完整的相容性或模型涵蓋範圍文件。
Grok 4.7 是 xAI 為軟體開發與知識工作打造的 AI 模型,支援長時間程式設計與專業分析,可透過 Grok Build、Cursor、Grok API 等平台使用;輸入每百萬 token $2 起,輸出 $6 起。
AakarDev AI 讓團隊透過單一儀表板管理 AI 供應商權限、專案設定、日誌與分析,支援 BYOK 工作流程,並可連接 OpenAI、Google Gemini、Anthropic、Groq、Mistral AI、Perplexity AI。
BookAI允許您透過簡單提供書名和作者與您的書籍進行AI聊天。
Skills Janitor 是一套託管於 GitHub 的斜線指令,用於稽核、追蹤與管理 Claude Code 和 OpenAI Codex skills;可找出重複項、失效連結與未使用 skills,並以獨立指令清理整理。
FeelFish 是一款支援 AI 輔助小說寫作的 PC 用戶端,協助小說創作者規劃角色與場景、撰寫與修訂長篇內容,並管理故事脈絡。提供免費方案與付費方案,支援多家大型模型供應商。
Benchspan 是一個 AI agent 安全平台,可即時發現 agents、阻擋 prompt injection 與資料外洩,並支援上線前紅隊測試,適合在 production 環境運行 agents 的團隊,並提供 Python 與 TypeScript SDKs。