錯誤 504：mimo-v2.5 呼叫失敗怎麼辦

回應 504 表示閘道等待上游模型回應逾時：請求已送出，但上游在閘道允許的時間內沒有回傳結果。

504 Gateway Timeout 表示閘道等待上游回應逾時。請求已被轉發，但上游在閘道限制的時間內沒有回傳結果。縮短輸出、改用串流、或降低 max_tokens 通常可以解決。

mimo-v2.5 由 Xiaomi 提供，本頁的觸發分析、處理建議與實測數據均基於該模型在閘道層的真實運行情況整理。

在本閘道，此類報錯最常見的誘因是：上游回應時間超過閘道逾時門檻。建議優先處理：改用串流輸出。

常見原因

  • 上游回應時間超過閘道逾時門檻
  • 上下文過長導致推理時間過長
  • 上游節點卡住
  • 使用非串流請求且輸出很長

解決辦法

  • 改用串流輸出
  • 縮短上下文並調小 max_tokens
  • 稍後重試
  • 換用推理更快的模型

帶指數退避的重試範例

下面這段在呼叫 mimo-v2.5 遇到 504 時會自動退避重試，最多 5 次，每次等待時間遞增並疊加隨機抖動，避免大量請求同時重試。base URL 與 API Key 請從環境變數讀取，不要寫死在程式碼裡。

import os, time, random
import requests

BASE  = os.getenv("OPENAI_BASE_URL")   # e.g. https://<your-gateway>/v1
KEY   = os.getenv("OPENAI_API_KEY")
MODEL = 'mimo-v2.5'


def chat(messages, retries=5):
    """Retry with exponential backoff + jitter."""
    for i in range(retries):
        try:
            r = requests.post(
                BASE + "/chat/completions",
                headers={"Authorization": "Bearer " + KEY},
                json={"model": MODEL, "messages": messages, "stream": True},
                timeout=60,
            )
            if r.status_code == 429 or r.status_code >= 500:
                time.sleep(min(2 ** i + random.uniform(0, 1), 30))
                continue
            r.raise_for_status()
            return r.json()
        except requests.exceptions.Timeout:
            time.sleep(min(2 ** i + random.uniform(0, 1), 30))
    raise RuntimeError("gave up after " + str(retries) + " retries")


print(chat([{"role": "user", "content": "hello"}]))

該模型的關鍵資料

API 端點https://api.airai.cc/v1
OpenAI 相容OpenAI-compatible
廠商Xiaomi
上下文1M
能力Reasoning, Tools, Files, Open Weights, Vision, Audio
API 格式openai, openai-response, openai-response-compact, anthropic, gemini, openai-alpha-search
計費方式p * 0.14 + cr * 0.0028 + c * 0.28

常見問題

呼叫 mimo-v2.5 回傳 504，會扣費嗎？

不會計費，只有實際產出內容才會計入用量。已經產出的部分會計費，失敗的部分不會。計費方式為 p * 0.14 + cr * 0.0028 + c * 0.28，未產出內容就不計費。先在控制台確認餘額與速率限制，再排查程式碼。

前端直連和後端轉發，哪一種更容易出現 504？

建議同時準備一個備用模型。在架構上做備援，比逐個錯誤修補更穩。廠商 Xiaomi 的該模型在閘道上有多個上游節點可切換。準備一個更輕量的備用模型，主流程就不會中斷。把模型名稱寫成設定項，切換上游時不用改商業邏輯。

逾時時間應該設多少？

先把併發降下來再判斷，多數吞吐問題會隨之消失。該模型上下文視窗 1M，廠商為 Xiaomi。上下文 1M 意味著長輸入會明顯拉長首字延遲。長輸出場景把逾時單獨放寬到 60 秒以上。結果加一層快取，重複請求不必每次都打到模型。

504 和模型本身的能力有關嗎？

這個錯誤與模型能力無關，屬於閘道層問題。多數情況是瞬時問題，可以自行恢復。該模型的能力標籤為 Reasoning, Tools, Files, Open Weights, Vision, Audio。先看是帳號層還是模型層，兩邊的處理方式完全不同。

該模型的其他錯誤

遇到同樣錯誤的其他模型

返回模型首頁

資料更新於: 2026-10-10 15:45

技術支持在線客服
返回頂部