llama-3.3-70b через llmgw API

Пример запроса

from openai import OpenAI

client = OpenAI(
    base_url="https://api.llmgw.ru/v1",
    api_key="llmgw-...",
)
resp = client.chat.completions.create(
    model="llama-3.3-70b",
    messages=[{"role": "user", "content": "Привет!"}],
)
print(resp.choices[0].message.content)

Другие модели