അപ്ഡേറ്റ് ചെയ്തത് 25 സെപ്റ്റ. 2025
6 മിനിറ്റ്
# Pythonpip install litellm# Node.jsnpm install litellm# ഉദാഹരണം: OpenAI + Anthropic + Mistral ഉപയോഗിക്കുന്നുexport OPENAI_API_KEY=sk-...export ANTHROPIC_API_KEY=sk-ant-...export MISTRAL_API_KEY=sk-mis-...from litellm import completionresp = completion(model="gpt-4o-mini", # അല്ലെങ്കിൽ "anthropic/claude-3-5-sonnet", "mistral/mistral-large"messages=.---## സ്ട്രീമിംഗ്, ടൂളുകൾ, JSON മോഡ്### സ്ട്രീമിംഗ് പ്രതികരണങ്ങൾ```pythonfrom litellm import completionfor chunk in completion(model="gpt-4o-mini",messages=.### ചെലവും ടോക്കൺ ഉപയോഗവുംLiteLLM ഓരോ അഭ്യർത്ഥനയ്ക്കും, മോഡലിനും, പ്രൊജക്ടിനും ടോക്കൺ ഉപയോഗവും ചെലവുകളും ട്രാക്ക് ചെയ്യാൻ കഴിയും. പ്രോക്സി ഉപയോഗിച്ച് ഉപയോഗം ലോഗുകളിലേക്കും ഡാഷ്ബോർഡുകളിലേക്കും ബില്ലിംഗ് സിങ്കിലേക്കും എക്സ്പോർട്ട് ചെയ്യാം. വ്യത്യസ്ത വില políticas ഉള്ള വിൽപനക്കാരെ ഒരുമിപ്പിക്കുമ്പോൾ ഇത് അനിവാര്യമാണ്.config.yaml നിർമ്മിക്കുക:model_list:- model_name: gpt-4o-minilitellm_params:model: openai/gpt-4o-miniapi_key: ${OPENAI_API_KEY}- model_name: claude-3-5-sonnetlitellm_params:model: anthropic/claude-3-5-sonnetapi_key: ${ANTHROPIC_API_KEY}router:strategy: simple_weightedroutes:- model: gpt-4o-miniweight: 0.6- model: claude-3-5-sonnetweight: 0.4rate_limits:requests_per_minute: 120logging:level: infosink: stdoutauth:api_keys:- key: svc-app-123litellm --config config.yaml --port 4000from openai import OpenAIclient = OpenAI(base_url=" api_key="svc-app-123")resp = client.chat.completions.create(model="gpt-4o-mini",messages=.
ChatPDF എങ്ങനെ നിപുണമാക്കാം: സാന്ദ്രമായ രേഖകളിൽ നിന്നുള്ള വേഗത്തിലുള്ള洞察ങ്ങൾ

വേഗതയുള്ള, കൃത്യമായ ഡോക്യുമെന്റുകൾക്കായി മികച്ച X ഓട്ടോ-ട്രാൻസ്ലേഷൻ বিকল্পം

ഇറാനിൽ Samsung AI വിവർത്തനം ലഭ്യമല്ലേ? പ്രായോഗിക പരിഹാരങ്ങൾ

പേർഷ്യൻ വിവർത്തന ഉപകരണങ്ങൾ: വേഗതയിലും കൃത്യതയിലും പ്രായോഗിക മാർഗ്ഗനിർദേശം

ആഴത്തിലുള്ള, ഉദ്ധരിക്കപ്പെട്ട ഗവേഷണത്തിനുള്ള മികച്ച Grok ബദലുകൾ

AI ഇമേജ് ജനറേറ്ററിൻ്റെ നിങ്ങൾ ശരിക്കും ഉപയോഗിക്കുന്ന 15 പ്രധാന ഫീച്ചറുകൾ