AI21 Labs

AI21 Labs — израильская лаборатория за Jamba: гибрид Mamba-Transformer, который остаётся дешёвым на длинных документах, потому что не платит полную цену Transformer за каждый токен. Контекст 256K. Новые аккаунты получают $10 кредита на три месяца.

Получить API-ключ

Две модели под наблюдением, OpenAI-совместимо, старт без карты. Старый список /studio/v1/models теперь возвращает 410 — актуальный id Jamba берите в консоли. Подходит, когда главное — документ; меньше — когда нужен общий чат.

Бесплатные модели: 2
Макс. контекст: 256K
Бесплатный тариф: $10 кредита на 3 месяца
Требование: Почта, без карты

Эндпоинт

Базовый URLhttps://api.ai21.com/studio/v1

Переменная средыAI21_API_KEY

Лимит скорости$10 of credits for 3 months

Совместим с OpenAI
Родной SDK: AI21 SDK
текст

Примеры кода

npm install openai

import OpenAI from 'openai'

const client = new OpenAI({
  baseURL: 'https://api.ai21.com/studio/v1',
  apiKey: process.env.AI21_API_KEY
})

const response = await client.chat.completions.create({
  model: 'jamba-mini-2',
  messages: [{ role: 'user', content: 'Explain closures in one paragraph.' }]
})

console.log(response.choices[0].message.content)

pip install openai

import os
from openai import OpenAI

client = OpenAI(
    base_url="https://api.ai21.com/studio/v1",
    api_key=os.environ["AI21_API_KEY"],
)

response = client.chat.completions.create(
    model="jamba-mini-2",
    messages=[{"role": "user", "content": "Explain closures in one paragraph."}],
)

print(response.choices[0].message.content)

curl https://api.ai21.com/studio/v1/chat/completions \
  -H "Content-Type: application/json" \
  -H "Authorization: Bearer $AI21_API_KEY" \
  -d '{
    "model": "jamba-mini-2",
    "messages": [{"role": "user", "content": "Explain closures in one paragraph."}]
  }'

pip install ai21

import os
from ai21 import AI21Client
from ai21.models.chat import ChatMessage

client = AI21Client(api_key=os.environ["AI21_API_KEY"])

response = client.chat.completions.create(
    model="jamba-mini-2",
    messages=[ChatMessage(role="user", content="Explain closures in one paragraph.")],
)

print(response.choices[0].message.content)

Стоит знать

Список /studio/v1/models теперь возвращает 410. Актуальные id Jamba берите в консоли.

Модели, которые вы получаете бесплатно2

Jamba Mini 2jamba-mini-2
Jamba Large 1.6jamba-large-1.6