अपना AI Application जोड़ें

YOUR_API_ENDPOINT की जगह अपने Dashboard से मिला endpoint डालें।

python
from openai import OpenAI

client = OpenAI(
    base_url="YOUR_API_ENDPOINT",  # Copy from Dashboard
    api_key="not-needed"
)

response = client.chat.completions.create(
    model="deepseek-ai/DeepSeek-V3-0324",
    messages=[
        {"role": "system", "content": "You are a helpful assistant."},
        {"role": "user", "content": "Hello!"}
    ]
)
print(response.choices[0].message.content)

tips_and_updatesTips

  • checkAPI OpenAI-compatible है — OpenAI के साथ काम करने वाली कोई भी library आपके GPU endpoint के साथ भी काम करेगी।
  • checkSelf-hosted models के लिए API key की ज़रूरत नहीं है। Set करें api_key="not-needed".
  • checkआप एक ही GPU endpoint से एक साथ कई agents को serve कर सकते हैं।
  • checkDeployment को customize करना हो तो Dashboard में Web Terminal का उपयोग करें।

मदद चाहिए?

DocumentationSupport से संपर्क करें