Вам нужен ключ для инференса из вашего аккаунта BroadNet Inference. Новые аккаунты получают $5 стартового гранта без привязки карты. Если вы пишете на Python, откройте руководство по Python SDK.
1. Установите пакет и задайте ключ
Текущей версии пакета openai (7.x) нужен Node.js 22 или новее.
npm install openai
export BROADNET_API_KEY='paste-the-key-once'
2. Первый запрос
Сохраните код в файл first-request.mjs и запустите node first-request.mjs:
import OpenAI from "openai";
const client = new OpenAI({
baseURL: "https://inference.broadnet.ai/v1",
apiKey: process.env.BROADNET_API_KEY,
});
const response = await client.chat.completions.create({
model: "broadnet/gemma-4-26b-a4b",
messages: [{ role: "user", content: "Reply with one short sentence." }],
});
console.log(response.choices[0].message.content);
broadnet/gemma-4-26b-a4b работает на бесплатном гранте. Для модели безлимитных тарифов используйте broadnet/deepseek-v4.1-flash и задайте max_tokens не меньше 1000: её рассуждения расходуют этот лимит. Почему ответы приходят пустыми.
3. Стриминг токенов
const stream = await client.chat.completions.create({
model: "broadnet/deepseek-v4.1-flash",
stream: true,
stream_options: { include_usage: true },
messages: [{ role: "user", content: "Count from one to three." }],
});
for await (const chunk of stream) {
process.stdout.write(chunk.choices[0]?.delta?.content ?? "");
if (chunk.usage) console.log("\n", chunk.usage);
}
4. Записывайте ID запроса
const { data, request_id } = await client.chat.completions
.create({ model: "broadnet/gemma-4-26b-a4b", messages: [{ role: "user", content: "Hi" }] })
.withResponse();
console.log(request_id, data.choices[0].message.content);
SDK берёт request_id из заголовка x-request-id. У разобранных ответов он также доступен как data._request_id.
Храните этот ID вместе со временем UTC, маршрутом и статусом: их попросит поддержка BroadNet. Коды ошибок и когда повторять запрос.
Решение проблем
- 401. Ключ неверен, истёк или исчерпан лимит оплаты по факту. Если
BROADNET_API_KEYне задана,apiKeyравенundefined, и SDK берётOPENAI_API_KEY, а если нет и её, выбрасывает ошибку. - 404. Проверьте, что
baseURLзаканчивается на/v1и что вы вызываетеchat.completions, а неresponses. Затем проверьте ID модели с префиксомbroadnet/. - Платная модель не работает на новом аккаунте. Стартовый грант $5 покрывает BroadNet Gemma 4 VL 26B (
broadnet/gemma-4-26b-a4b) и обе модели BroadNet Transcribe. Чтобы пользоваться другими чат-моделями — DeepSeek V4.1 Flash, GLM 5.3 и Qwen3.8 27B, — пополните баланс. - Пустой
content. Рассуждения расходуютmax_tokens. Поднимите лимит или не задавайте его. Почему ответы приходят пустыми. - 429. Ключ с оплатой по факту допускает 30 запросов в минуту, а одновременно — не больше 4. По умолчанию SDK повторяет запрос дважды; это настраивается через
maxRetriesу клиента. Об оборванных потоках — в руководстве стриминг chat completions.
