mirror of
https://github.com/BerriAI/litellm.git
synced 2025-04-25 02:34:29 +00:00
Litellm merge pr (#7161)
* build: merge branch * test: fix openai naming * fix(main.py): fix openai renaming * style: ignore function length for config factory * fix(sagemaker/): fix routing logic * fix: fix imports * fix: fix override
This commit is contained in:
parent
d5aae81c6d
commit
350cfc36f7
88 changed files with 3617 additions and 4421 deletions
|
@ -3,54 +3,51 @@ DEFAULT_BATCH_SIZE = 512
|
|||
DEFAULT_FLUSH_INTERVAL_SECONDS = 5
|
||||
DEFAULT_MAX_RETRIES = 2
|
||||
LITELLM_CHAT_PROVIDERS = [
|
||||
# "openai",
|
||||
# "openai_like",
|
||||
# "xai",
|
||||
# "custom_openai",
|
||||
# "text-completion-openai",
|
||||
# "cohere",
|
||||
# "cohere_chat",
|
||||
# "clarifai",
|
||||
# "anthropic",
|
||||
# "anthropic_text",
|
||||
# "replicate",
|
||||
# "huggingface",
|
||||
# "together_ai",
|
||||
# "openrouter",
|
||||
# "vertex_ai",
|
||||
# "vertex_ai_beta",
|
||||
# "palm",
|
||||
# "gemini",
|
||||
# "ai21",
|
||||
# "baseten",
|
||||
# "azure",
|
||||
# "azure_text",
|
||||
# "azure_ai",
|
||||
# "sagemaker",
|
||||
# "sagemaker_chat",
|
||||
# "bedrock",
|
||||
"openai",
|
||||
"openai_like",
|
||||
"xai",
|
||||
"custom_openai",
|
||||
"text-completion-openai",
|
||||
"cohere",
|
||||
"cohere_chat",
|
||||
"clarifai",
|
||||
"anthropic",
|
||||
"anthropic_text",
|
||||
"replicate",
|
||||
"huggingface",
|
||||
"together_ai",
|
||||
"openrouter",
|
||||
"vertex_ai",
|
||||
"vertex_ai_beta",
|
||||
"gemini",
|
||||
"ai21",
|
||||
"baseten",
|
||||
"azure",
|
||||
"azure_text",
|
||||
"azure_ai",
|
||||
"sagemaker",
|
||||
"sagemaker_chat",
|
||||
"bedrock",
|
||||
"vllm",
|
||||
# "nlp_cloud",
|
||||
# "petals",
|
||||
# "oobabooga",
|
||||
"nlp_cloud",
|
||||
"petals",
|
||||
"oobabooga",
|
||||
"ollama",
|
||||
# "ollama_chat",
|
||||
# "deepinfra",
|
||||
# "perplexity",
|
||||
# "anyscale",
|
||||
# "mistral",
|
||||
# "groq",
|
||||
# "nvidia_nim",
|
||||
# "cerebras",
|
||||
# "ai21_chat",
|
||||
# "volcengine",
|
||||
# "codestral",
|
||||
# "text-completion-codestral",
|
||||
# "deepseek",
|
||||
# "sambanova",
|
||||
# "maritalk",
|
||||
# "voyage",
|
||||
# "cloudflare",
|
||||
"ollama_chat",
|
||||
"deepinfra",
|
||||
"perplexity",
|
||||
"mistral",
|
||||
"groq",
|
||||
"nvidia_nim",
|
||||
"cerebras",
|
||||
"ai21_chat",
|
||||
"volcengine",
|
||||
"codestral",
|
||||
"text-completion-codestral",
|
||||
"deepseek",
|
||||
"sambanova",
|
||||
"maritalk",
|
||||
"cloudflare",
|
||||
"fireworks_ai",
|
||||
"friendliai",
|
||||
"watsonx",
|
||||
|
|
Loading…
Add table
Add a link
Reference in a new issue