JSON ⇄ TOON-konverterer

Hva er TOON?

TOON — Token-Oriented Object Notation — er en kompakt, tapsfri måte å representere de samme dataene som JSON på, men med langt færre tokens når de sendes til en stor språkmodell. I stedet for å gjenta hver nøkkel ved hver post og pakke inn alt i klammeparenteser, hakeparenteser og anførselstegn, koder TOON et uniformt array av objekter som en enkelt overskriftsrad etterfulgt av rene verdrader. Resultatet ligner mye på CSV med struktur, og kan konverteres tilbake til identisk JSON.

Hvorfor færre tokens betyr noe

Hvert token du sender til en LLM koster penger og forbruker kontekstvindubudsjettet. Strukturerte data — API-svar, databaserader, konfigurasjon — er typisk den mest token-intensive delen av en prompt på grunn av alle gjentatte nøkler og tegnsetting. Å konvertere disse dataene til TOON før de når modellen kan drastisk redusere tokenkostnadene.

Eksakte vs estimerte tokentellinger

For OpenAI-modeller er tellingene her eksakte: GPT-4o og o-serien bruker o200k_base-tokenizeren, GPT-4 / GPT-3.5 bruker cl100k_base, begge kjørt lokalt med js-tiktoken. For Claude og Gemini finnes det ingen offentlig tokenizer for nåværende modeller, så vi viser kalibrerte estimater, alltid merket med en synlig ≈-tag.

Når man IKKE bør bruke TOON

TOON utmerker seg på uniforme arrays av objekter. For dypt nestede, sterkt uregelmessige eller enkel-objekt-data med få gjentatte nøkler kan TOON være like stort eller til og med større enn minifisert JSON. Statistikkfeltet forteller deg tydelig når JSON ville vært det mindre valget for din spesifikke inndata.

Vanlige spørsmål

Hva er TOON?

TOON (Token-Oriented Object Notation) er et kompakt, tapsfritt serialiseringsformat som representerer de samme dataene som JSON med færre LLM-tokens. Det er særlig effektivt for uniforme arrays av objekter, som det koder som en overskriftsrad pluss komma- eller tabseparerte verdrader.

Hvor mye sparer TOON sammenlignet med JSON?

Det avhenger av dataene dine. For uniforme arrays av objekter reduserer TOON vanligvis antall tokens med 40–60 %. For dypt nestede eller ikke-uniforme data er besparelsene mindre og JSON kan av og til være mindre. Dette verktøyet måler den reelle forskjellen for dine eksakte inndata.

Er dataene mine private?

Ja. All konvertering og tokentelling skjer i nettleseren din med lokalt lagrede biblioteker under /vendor/. Ingen data sendes til en server, ingen API-nøkler kreves, og det er ingen nettverksanrop under kjøring — trygt for proprietære nyttelaster og sensitive prompter.

Når bør jeg IKKE bruke TOON?

TOON fungerer best med uniforme, tabellaktige data. For dypt nestede strukturer, sterkt uregelmessige objekter eller data med få gjentatte nøkler kan TOON være like stort eller større enn minifisert JSON. Statistikkfeltet forteller deg tydelig når JSON ville vært mindre.

Er tokentelling nøyaktige?

For OpenAI-modeller er tellingene nøyaktige, beregnet lokalt med js-tiktoken (o200k_base for GPT-4o / o-serien, cl100k_base for GPT-4 / GPT-3.5). For Claude og Gemini er de eksakte tokenizere ikke offentlige, så vi viser et tydelig merket kalibrert estimat (≈).

Hvor oppdaterte er prisene, og kan jeg endre dem?

Prisene per million tokens er redigerbare standardverdier, ikke en fast informasjonskilde. Prisfeltet er fullt redigerbart, verdien din lagres per modell i nettleseren din, og verktøyet lenker til hver leverandørs offisielle prissettingsside. Tokentelling er den eksakte, autoritative delen; kostnaden er rett og slett tokens × prisen du angir, vist som et estimat.