Skip to content

Ishtirokchilarni saqlab qolish

Claude-modellari NordRouter avtomatik ravishda uzoq kontekstlarni kechoqlaydi.Agar siz takrorlanadigan so'rovlarni (sistem-prompt, muloqot tarixi, katta hujjat) bilan o'chirib qo'ysangiz, takrorlanadigan qismni kechoq o'qish narxi bo'yicha, bo'yicha 90% chegirma odatdagi kirish narxi bo'yicha narxlashtiriladi.

Bu qanday ishlaydi

  1. Birinchi so'rovda uzoq kontekst bor kontekst ** saqlanadi ** kecha.
  2. Keyingi so'rovlar o'sha boshlangan o'xshash qism **shartlashtirilgan narxga saqlanadigan saqlanadigan joydan o'qiladi.
  3. Javobda buni usage.prompt_tokens_details orqali ko'rish mumkin.

Bu qancha pulga tushadi?

Pul saqlovchisi Anthropic da ishlaydiganidek, model kirish narxidan ikki stavka bo'yicha ishlaydi:

OperatsiyaKo'paytiruvchiYozilganda
Kash yozuv (cache-write)×1.25Birinchi marta kontekst saqlanishiga duch kelganida
O'qish (cache-read)×0.1 (−90%)har bir takrorlashda bir xil kontekstda

Har bir modelning aniq narxi o'ziga xosdir ko'ringModellar katalogining. Claude Fable 5 misoli (kirish $1.548/1M): yozuv ≈ $1.94/1M, o'qish ≈ $0.155/1M.

Ishlab chiqarish muddati

Faqatgina etarlicha uzoq kontekstlar (bir necha ming tokendan) saqlanadi. Qisqa so'rovlar odatdagi narxga ko'ra amalga oshiriladi ularga pul saqlanmaydi.

Qanday qilib foydalanish mumkin

1. Avtomatik ravishda hech narsa qilishingiz shart emas.

Aksariyat narsalarga moslash uchun hech narsa yo'q. Agar vositasiz bitta prefiksni (sistem shrift, tarix, katta hujjat) jo'natsa, NordRouter uni o'zi kecha qiladi. ~~~ Bu allaqachon Claude Code, OpenCode, Cline va har qanday tarixli chatbotlarda ishlaydi: har bir qadamda agent butun kontekstni jo'natadi. ~ ~ Birinchi qadam kechaga yoziladi, keyingi har bir qadam uni 90% chegirma bilan o'qiydi.

2. Qopxona ishlaganini tekshirish.

Javobda usage blokini ko'ring agar kirishning bir qismi saqlanishga o'tgan bo'lsa, u erda cached_tokens bo'ladi:

json
"usage": {
  "prompt_tokens": 21364,
  "prompt_tokens_details": {
    "cached_tokens": 21361     // ← прочитано из кэша по ×0.1
  },
  "completion_tokens": 40
}

cached_tokens > 0 degani, ushbu kirish qismini o'qish narxidan, to'liq emas, balki o'qish narxidan hisoblab chiqarilgan.

3. O'z qo'lingizdan boshqarish cache_control orqali.

Agar siz o'zingiz o'zingiz tasdig'ini belgilashni istasangiz (endpoint /v1/messages), blokning oxirida cache_control belgisini qo'ying va uni qayta ishlating, masalan, systemdagi katta ko'rsatkichda.

bash
curl https://nordrouter.com/v1/messages \
  -H "x-api-key: sk-nr-ВАШ-КЛЮЧ" \
  -H "anthropic-version: 2023-06-01" \
  -H "content-type: application/json" \
  -d '{
    "model": "anthropic/claude-fable-5",
    "max_tokens": 512,
    "system": [
      {
        "type": "text",
        "text": "Ты ассистент по нашей документации. Вот справочник: <...много текста...>",
        "cache_control": { "type": "ephemeral" }
      }
    ],
    "messages": [{ "role": "user", "content": "Первый вопрос по справочнику?" }]
  }'
python
from anthropic import Anthropic

client = Anthropic(base_url="https://nordrouter.com", api_key="sk-nr-ВАШ-КЛЮЧ")

resp = client.messages.create(
    model="anthropic/claude-fable-5",
    max_tokens=512,
    system=[{
        "type": "text",
        "text": "Ты ассистент по нашей документации. Вот справочник: <...>",
        "cache_control": {"type": "ephemeral"},   # кэшируем справочник
    }],
    messages=[{"role": "user", "content": "Первый вопрос по справочнику?"}],
)
print(resp.usage)  # cache_creation_input_tokens на 1-м запросе, cache_read на след.

Birinchi so'rov *diraktorni *kechga yozib qo'yadi, keyingi so'rovlar ham xuddi shunday. system **** uni x 0.1 ga o'qib berishadi. cache_control Avto-qopxona har doim ustuvorlik bilan bunday so'rovlarga aralashmaydi.

Tumbler shaxsiy kabinetda.

LKSetting → Navga qo'yish (Claude):

  • Mashq qilingan (devoldan) barcha Claude so'rovlari uchun avtomatik saqlov, o'z belgilari bo'lmagan holda.
  • **Qayta ishlatilmaydigan saqlov uchun pul to'lamaslik uchun har bir so'rovingiz to'liq noyob bo'lsa, **Qayta o'chirib tashlash kerak.
  • Agar siz o'zingiz cache_controlni o'tkazsangiz ham, Tumblerning joylashuvi muhim emas, sizning belgilaringiz hali ham ustuvor bo'ladi.

Xavflanishning bir misoli

40 sahifadagi (~30 000 token) ko'rsatkich, unga 10 ta Claude Fable 5 savollari qo'shilib:

KasxasizS kasxasiz
Nima ro'yxatdan o'tkaziladi10 × 30k kirish1 yozuv + 9 o'qish
Kirish qiymati~$0.46 (≈41)~$0.10 (≈9)

Qimmatlik tejaydi 78% va bir xil kontekstga qo'yilgan savollar qancha ko'p bo'lsa, ta'sir shunchalik kuchli bo'ladi. ~~~ Shu sababli agent kodlash (kuntexdan o'nlab marta foydalanilgan) ancha arzonroq.