第 0 天支援:GPT-5.6(Sol、Terra、Luna)

LiteLLM 現在支援 GPT-5.6 系列。透過 LiteLLM AI Gateway 將流量路由至 OpenAI 最新的前沿模型,無需變更程式碼。

LiteLLM 現在支援 GPT-5.6 系列。透過 LiteLLM AI Gateway 將流量路由至 OpenAI 最新的前沿模型,無需變更程式碼。
LiteLLM 現在在 Day 0 即支援 GPT-5.5 與 GPT-5.5 Pro。透過 LiteLLM AI 閘道將流量路由到 OpenAI 最新的前沿模型,無須變更程式碼。
LiteLLM 現已支援 GPT-5.4-mini 與 GPT-5.4-nano——適合簡單完成與高吞吐量工作負載的高成本效益模型。
如果您使用的是 v1.82.3-stable 或以上版本,則不需要任何更新即可使用這些模型。
1. 設定 config.yaml
model_list:
- model_name: gpt-5.4-mini
litellm_params:
model: openai/gpt-5.4-mini
api_key: os.environ/OPENAI_API_KEY
- model_name: gpt-5.4-nano
litellm_params:
model: openai/gpt-5.4-nano
api_key: os.environ/OPENAI_API_KEY
2. 啟動 proxy
litellm --config /path/to/config.yaml
3. 測試
# GPT-5.4-mini
curl -X POST "http://localhost:4000/v1/chat/completions" \
-H "Content-Type: application/json" \
-H "Authorization: Bearer $LITELLM_KEY" \
-d '{
"model": "gpt-5.4-mini",
"messages": [{"role": "user", "content": "What is the capital of France?"}]
}'
# GPT-5.4-nano
curl -X POST "http://localhost:4000/v1/chat/completions" \
-H "Content-Type: application/json" \
-H "Authorization: Bearer $LITELLM_KEY" \
-d '{
"model": "gpt-5.4-nano",
"messages": [{"role": "user", "content": "What is 2 + 2?"}]
}'
from litellm import completion
# GPT-5.4-mini
response = completion(
model="openai/gpt-5.4-mini",
messages=[{"role": "user", "content": "What is the capital of France?"}],
)
print(response.choices[0].message.content)
# GPT-5.4-nano
response = completion(
model="openai/gpt-5.4-nano",
messages=[{"role": "user", "content": "What is 2 + 2?"}],
)
print(response.choices[0].message.content)
從瀏覽器/行動用戶端透過 WebRTC 連線到 Realtime API。LiteLLM 負責驗證與金鑰管理。
LiteLLM 現在完整支援 GPT-5.4!
LiteLLM 現在在 Day 0 即支援 GPT-5.3-Codex,並支援 Responses API 輸出項目中的新 assistant phase 中繼資料。