Una scheda del titolo che recita 'Jev: un modello che rifiuta di scrivere' con il sottotitolo 'Il modello decisionale di TypeSafe AI restituisce risposte tipizzate invece di testo', tre schede etichettate per le primitive Choice, Score e Noul, e un blocco statistiche che mostra 777 giudizi in meno di 0,7 secondi a $0,042 per milione di token di input.
Guides & Insights

Jev si rifiuta di scrivere una singola parola: cosa fa il modello decisionale di TypeSafe AI, e cosa nessuno ha ancora verificato

Autore

Magnus Corvin

Data di pubblicazione

Ultimi modelli · 20Vedi tutti i modelli
Benchmark: Artificial Analysis · aggiornato ogni giorno
Torna a tutti gli articoli

Jev è il primo modello di TypeSafe AI che un lettore incontrerà probabilmente attraverso una tabella di costi piuttosto che una chat box, perché non c'è alcuna chat box. Lanciato il 15 settembre 2026 da Diogo Almeida — coautore dell'articolo InstructGPT, il lavoro che ha fatto sì che ChatGPT si comportasse come un assistente — Jev non genera affatto testo. Prende un pezzo di stato (un'email, una riga di log, un ticket di supporto, un blob JSON di coordinate di gioco) più una lista di domande tipizzate, e restituisce risposte tipizzate: una scelta da un insieme che hai fornito, un punteggio su una rubrica, o una probabilità sì/no, ciascuna con il proprio valore di confidenza. Niente prosa, niente codice, niente spiegazione. La proposta di TypeSafe è che questa specificità è il prodotto, perché offre velocità e prezzo che un modello generativo non può eguagliare — da 20 a 200 volte più veloce e da 40 a 400 volte più economico rispetto a "LLM comparabili" nei materiali di lancio dell'azienda stessa, a $0,042 per milione di token di input con output fatturato a zero.

Il numero più utile pubblicato nelle prime 48 ore non è uno di quelli. Viene da Every, il cui responsabile delle valutazioni ha messo alla prova Jev su 27 articoli pubblicati di Every più 10 controparti in stile IA, ponendo 21 domande a tutti e 37 i documenti contemporaneamente: 777 giudizi in meno di 0,7 secondi, per circa un quarto di centesimo. Un secondo test, eseguito dall'amministratore delegato di Every, ha messo 12 brani sintetici — sei puliti, sei con difetti deliberatamente inseriti — contro quattro verifiche di scrittura. Jev ha risposto con una mediana di 0,35 secondi per brano, contro 8,83 secondi di Claude Fable 5.1 con impegno elevato: circa 25 volte più veloce a roughly 1/580 del costo. Ha individuato sei dei sette difetti inseriti. Claude Fable 5.1 li ha individuati tutti e sette. Il verdetto di Every è stato "buono ma non perfetto", e questa è la lettura onesta in una riga di Jev dall'unico test indipendente che qualcuno abbia pubblicato finora: le affermazioni su velocità e costi reggono il confronto con una terza parte, quella sull'accuratezza si colloca un gradino sotto la frontiera, e il campione è abbastanza piccolo che nessuno dovrebbe trarne conclusioni per la produzione.

Una nota su che tipo di prove utilizza questo articolo, perché i livelli sono insolitamente distanti per un modello così nuovo. Jev è reale e richiamabile: esiste un endpoint documentato, un SDK Python, un alias di modello e un prezzo pubblicato. Il lancio è annunciato dal fornitore, non trapelato, e nessuno si sta chiedendo se esista. Ma ogni affermazione sulle prestazioni che TypeSafe presenta è di TypeSafe stessa, l'architettura non è pubblicata, i pesi non sono disponibili e la dashboard di benchmark dietro il titolo 20-200x è un insieme di valutazioni interne del flusso di lavoro anziché una classifica pubblica. Una parte esterna lo ha testato. Questo articolo mantiene visibilmente separati i numeri dei fornitori, i numeri indipendenti e le domande aperte, invece di mediarli in un consenso che non esiste.

Che cosa ha effettivamente rilasciato TypeSafe

Jev è il primo di quelli che TypeSafe chiama modelli System One — nome preso in prestito dalla metà veloce e intuitiva della cognizione di Daniel Kahneman, contrapposta alla modalità deliberativa più lenta che i chatbot imitano. Il contrasto che TypeSafe evidenzia è con il modello standard di costringere un generatore di testo a emettere output strutturato e poi analizzare quel testo per ricondurlo a qualcosa di cui il codice possa fidarsi. Jev salta del tutto il testo. La documentazione di TypeSafe afferma la questione senza mezzi termini: "I modelli linguistici di grandi dimensioni (LLM) sono progettati per produrre testo che gli esseri umani possano leggere. Quando hai bisogno che un modello formuli un giudizio che il tuo codice utilizzerà, si crea un disallineamento."

La superficie di output è composta da tre primitive, e non c'è nient'altro. Ogni domanda che poni deve essere una di esse:

Scelta — seleziona un'opzione da un elenco che fornisci, restituendo l'opzione selezionata insieme a una probabilità per ciascun candidato e un livello di confidenza. Le opzioni sono limitate a 255 per campo; oltre tale limite TypeSafe documenta un modello a due fasi: valutare i candidati in modo indipendente e poi scegliere.

• Punteggio — colloca lo stato su una rubrica ordinata, restituendo il livello, una probabilità per livello e una confidenza. Il rischio di churn su una scala da 0 a 1 è l'esempio nella documentazione.

• Noul — una parola macedonia di "no" e "null" — una singola affermazione sì/no, che restituisce la probabilità calibrata che sia vera.

A capture of TypeSafe's own documentation introduction page, showing the sentence 'Jev is TypeSafe's flagship model and the first System One model', a table of the three primitives Choice, Score and Noul with what each returns, and the line that adding questions to a call barely changes the response time.

La proprietà interessante non è una singola primitiva, ma il modo in cui si compongono. Tutte e tre possono essere combinate in un'unica chiamata API, e ogni domanda viene valutata in parallelo rispetto a un'unica lettura condivisa dello stesso stato. La documentazione di TypeSafe afferma che aggiungere domande "non cambia quasi il tempo di risposta", e il test indipendente lo conferma nella pratica — 21 domande su 37 documenti sono rientrate negli stessi 0,7 secondi. È questo che fa crollare il prezzo per giudizio: non stai pagando per una generazione più lunga, stai pagando per un'unica passata.

Il perimetro pratico, come documentato e come riportato dai primi utenti: un budget di richiesta di circa 32.000 token, descritto nella documentazione di TypeSafe come circa 150.000 caratteri inglesi; nessun input di immagini o audio al lancio; e una forma di richiesta e risposta che non segue la convenzione chat-completions di OpenAI, per cui per chiamarla serve un client su misura anziché un semplice cambio di base-URL. L'accesso avviene tramite una lista d'attesa per l'accesso anticipato più un playground nel browser, con code>jev-latest/code> come alias del modello.

RLCD significa calibrato, non preferito

TypeSafe addestra Jev con un metodo che chiama RLCD — Reinforcement Learning for Calibrated Decisions, secondo la documentazione della stessa azienda. L'acronimo è così nuovo che le prime trattazioni ne hanno dato espansioni incoerenti, quindi vale la pena stabilire con precisione che cosa designa davvero, perché la distinzione è l'intera tesi della ricerca.

RLHF ottimizza per un output preferito dagli esseri umani. RLVR ottimizza per la correttezza verificabile, quella del tipo che supera i test case. RLCD ottimizza per la calibrazione: un modello che dice di essere sicuro al 70% dovrebbe avere ragione circa il 70% delle volte. Questo è un obiettivo diverso dall'avere ragione, ed è il motivo per cui ogni risposta di Jev arriva con una distribuzione di probabilità allegata anziché con una semplice risposta. La modalità di errore prevista è un modello che sa quando non sa, così il tuo codice può decidere cosa farne.

Ciò che questo ti offre in pratica è una superficie di controllo. Il modello documentato prevede tre fasce di confidenza — agire automaticamente in alto, segnalare o confermare nel mezzo, indirizzare a una persona in basso — con le soglie che risiedono nel tuo codice anziché nel modello. Se le fasce siano affidabili è una questione empirica che riguarda i tuoi dati, ed è una a cui TypeSafe ti dice esplicitamente di rispondere da solo, osservando che le soglie di confidenza sono specifiche del caso d'uso e dovrebbero essere testate sui tuoi esempi etichettati. Quell'istruzione è la frase più importante della documentazione, ed è il motivo per cui esiste la sezione successiva.

I numeri, ordinati per chi li ha prodotti

È qui che gran parte della trattazione di Jev si fa vaga, quindi vale la pena essere espliciti sulla provenienza. Ecco ciò che proviene dal fornitore, ciò che proviene da un tester indipendente e ciò che è semplicemente sconosciuto.

• Dichiarate dal fornitore, non riprodotte — le asserzioni principali su velocità e costi. Latenza end-to-end di 70-500 ms contro 3-329 secondi per le chiamate ai LLM di frontiera; da 20 a 200 volte più veloce e da 40 a 400 volte più economico; un singolo risultato di workflow nel caso migliore pubblicizzato come 193,6 volte più veloce e 444,6 volte più economico. TypeSafe riconosce che si tratta di cifre relative al caso migliore, non universali.

• Dichiarato dal fornitore e verificabile sul listino prezzi — 0,042 $ per milione di token di input, ovvero 42 $ per miliardo, con output gratuito. Il motivo per cui l’output è gratuito è meccanico anziché promozionale: non c’è decodifica autoregressiva da misurare, quindi non ci sono token di output da fatturare. Per dare un’idea, gli stessi materiali di lancio indicano il prezzo tipico dell’input frontier tra 0,20 $ e 10 $ per milione, con l’output spesso circa cinque volte il prezzo dell’input.

• Riferito dal fornitore, da un benchmark interno — la dashboard dei flussi di lavoro di TypeSafe stessa, 711 casi su quattro attività, con risposte di riferimento derivate dal giudizio medio di GPT-6 Astra e Claude Fable 5.1 piuttosto che dalla verità di riferimento. Su quella dashboard Jev totalizza, in aggregato, il 67,8% contro il 74,1% del miglior comparatore. Nel dettaglio: incidenti di sicurezza 61,7% contro il 66,2% di Opus 5; osservabilità delle tracce degli agenti 71,6% contro 76,6%; elaborazione delle fatture 61,8% contro 79,1%; servizio clienti 76,0% contro 78,3%. Jev vince le colonne relative a costo e latenza su quel grafico e perde la colonna relativa all'accuratezza. La dashboard stessa segnala un possibile bias dell'harness, e TypeSafe ha dichiarato di aver saltato deliberatamente le classifiche pubbliche in favore di valutazioni una tantum legate agli aggiornamenti di prodotto.

Misurato in modo indipendente, campione ridotto — i test Every descritti sopra: 777 giudizi in meno di 0,7 secondi per circa un quarto di centesimo; 1.709 giudizi su 11 esperimenti per meno di un centesimo in totale; circa 25 volte più veloce e 1/580 del costo di Claude Fable 5.1 su un compito di classificazione di 12 passaggi, pur mancando uno dei sette difetti inseriti che il comparatore ha rilevato. La conclusione di Every stessa era che avrebbe voluto un controllo di accuratezza molto più approfondito prima di metterlo in produzione.

• Sconosciuta — l'architettura. Nessun paper al lancio, nessun numero di parametri, nessuna divulgazione del compute di addestramento, nessun peso. TypeSafe ha affermato che i dettagli vengono tenuti "riservati per ora", con un paper forse più avanti.

A single-column scoreboard titled 'Jev - the scoreboard' listing six dimensions: latency 70-500 ms claimed, price $0.042 per million input with output free, accuracy 67.8% on the vendor dashboard, independent test 6 of 7 defects caught, context about 32K tokens with no image input, and weights not released.

Lo schema tra quei livelli è coerente, e non è lo schema che il titolo 200x suggerisce. Ogni numero indipendente e dei fornitori concorda che Jev è drasticamente più economico e drasticamente più veloce. Nessun numero, da nessuna parte, incluso quello di TypeSafe stesso, mostra che sia più accurato dei modelli di frontiera con cui viene confrontato nel prezzo. Sulla dashboard del fornitore stesso si colloca all'incirca al livello di un buon modello di fascia media. Il confronto che regge non è "intelligente quanto un modello di frontiera per un centesimo del prezzo" — è "vicino al giudizio di un modello di fascia media a una frazione di centesimo per chiamata, abbastanza veloce da girare su ogni singolo turno."

Cosa significa e cosa non significa "zero allucinazioni"

I materiali di lancio di TypeSafe includono un grafico che mostra un tasso di errore nelle chiamate agli strumenti dello 0% per Jev, a fronte di un tasso non nullo per i modelli di confronto, e la dicitura «resistente alle allucinazioni» accompagna il modello. Entrambe le cose sono vere ed entrambe sono più circoscritte di quanto non lascino intendere a una prima lettura.

La garanzia è strutturale. Ogni possibile risposta viene enumerata prima che il modello venga eseguito — hai fornito l'elenco delle scelte, la rubrica o l'affermazione vero/falso — quindi non c'è spazio in cui emettere un valore al di fuori del tipo dichiarato. Una chiamata di tool malformata non è qualcosa che Jev può produrre. Questa è una proprietà ingegneristica autentica, e per chiunque abbia passato una settimana a scrivere logica di retry attorno a errori di parsing JSON, vale soldi veri.

Non è un'affermazione sulla correttezza. Una risposta valida secondo lo schema può comunque essere sbagliata: Jev può instradare con sicurezza un reclamo di fatturazione alla coda tecnica, e l'output sarà perfettamente ben formato pur essendo inutile. Almeida stesso l'ha detto, riconoscendo che è possibile sbagliarsi con sicurezza. Il modo utile di tenere insieme entrambi i fatti è che Jev elimina la classe di errori che deriva dalla formattazione dell'output, e non fa assolutamente nulla per la classe che deriva dal giudizio. Il che significa che la questione dell'accuratezza è interamente una questione di calibrazione, e la calibrazione è esattamente la cosa che devi misurare da solo.

Come testare l'affermazione sulla calibrazione sui tuoi dati

La calibrazione è una delle poche proprietà di un modello che si possono verificare adeguatamente con qualche centinaio di esempi e senza infrastruttura ML, ed è l'unico test che conta prima che Jev tocchi un percorso di produzione. La procedura è breve.

Prendi qualche centinaio di casi per cui hai già le etichette. Poni a Jev la domanda che conta — la decisione di instradamento, il punteggio di rischio, il controllo dei difetti — e raggruppa le risposte in base alla confidenza che ha riportato. Poi verifica se il gruppo con confidenza 0,9 ha ragione circa il 90% delle volte, quello con 0,7 circa il 70%, e così via. Un modello ben calibrato traccia una linea diagonale. Un modello che è semplicemente sicuro di sé raggruppa tutto sopra 0,9 e ha ragione il 70% delle volte, e questa è la forma che rompe silenziosamente una pipeline automatizzata.

Lo stesso test ti dice quali soglie usare. Se il bucket 0.9 è davvero accurato al 90% sui tuoi dati, puoi automatizzarlo. Se la tua fascia intermedia è una poltiglia, la instradi verso un umano oppure la affidi a un modello generativo e lasci che il percorso costoso gestisca l'ambiguità. Questa suddivisione — modello economico sulla maggioranza sicura, modello costoso sul resto incerto — è l'architettura che Jev sta effettivamente sostenendo, ed è il motivo per cui è meglio intendere il modello come un componente anziché come un sostituto.

Quanto costa, analizzato nel dettaglio

Il prezzo è abbastanza semplice da poterci ragionare, il che è raro. L'input costa $0,042 per milione di token. L'output è gratuito. Con il budget documentato per richiesta di circa 150.000 caratteri, una singola chiamata di dimensione massima costa ben meno di un centesimo.

Due cifre riportate danno un'idea della scala. Un utente dei primi tempi ha eseguito circa 5.000 richieste per circa 2 dollari. La dimostrazione di Doom — Jev che guida un bot usando una descrizione testuale dello stato di gioco anziché i pixel grezzi — girava a circa 10 chiamate al secondo per circa 7 dollari all'ora. E le 777 valutazioni di Every su 37 documenti sono risultate costare circa un quarto di centesimo, che è il numero che rende comprensibile il caso d'uso interessante: a quel prezzo, verificare ogni singolo turno di un ciclo di agente smette di essere una decisione di costo e diventa la scelta predefinita.

Questo è il vero argomento a favore di Jev. Un passaggio di verifica a ogni turno — questa chiamata di strumento ha contraddetto quella precedente, questo output è coerente con l'intento dichiarato dall'utente, dovrebbe far scattare un allarme — è sempre stato tecnicamente possibile con un modello di frontiera ed economicamente assurdo su scala. A 0,042 $ per milione di token senza costi per l'output, lo stesso passaggio diventa sostenibile a ogni turno. Il valore qui non sta nel fatto che Jev pensi meglio di un modello di frontiera, perché non è così. Il valore sta nel fatto che pensa in modo abbastanza economico e rapido da essere consultato costantemente.

Vale la pena dirlo chiaramente, perché è l'ovvia domanda successiva: OrcaRouter non fornisce Jev. Il modello di TypeSafe è in accesso anticipato, con lista d'attesa, e ha una struttura di richiesta tutta sua, quindi chiunque lo testi passa direttamente da TypeSafe. Il punto in cui un livello di routing si inserisce è l'altra metà del flusso di lavoro. Il pattern per cui Jev è progettato prevede due modelli, non uno: Jev prende la decisione tipizzata, e un modello generativo gestisce la parte che richiede prosa, codice o una spiegazione. È proprio la metà generativa quella che OrcaRouter copre: 197 modelli su 15 provider dietro un'unica chiave compatibile con OpenAI, al prezzo di listino del provider passato tal quale con 0% di ricarico, così un taglio di prezzo del fornitore arriva anche a noi lo stesso giorno in cui viene rilasciato. Entrambe le metà di un flusso di lavoro modellato su Jev sono testabili senza un secondo contratto, e quando il componente decisionale non è ancora dimostrato, è il percorso di failover che impedisce a un cattivo risultato di calibrazione di trasformarsi in un incidente in produzione.

A capture of the OrcaRouter models catalogue showing the header '197 models - 15 providers - one API key, one bill', an OpenAI-compatible chat-completions request example, and model cards for DeepSeek V4.1 Flash, OpenAI GPT-6 Astra and Google Gemini 3.8 Flash with their per-million-token input and output prices.

Dove Jev non si adatta

Le limitazioni sono dichiarate dal fornitore con insolita chiarezza, il che rende questa sezione facile da scrivere in modo onesto. Jev non è in grado di generare testo libero. Non può scrivere codice. Non può sostenere una conversazione. Non ha un'interfaccia di chat, né input di immagini, e ha un budget di contesto di circa 32.000 token — un ordine di grandezza inferiore rispetto ai modelli a contesto lungo con cui viene confrontato sul prezzo. I campi a scelta sono limitati a 255 opzioni. E la proprietà "nessuna allucinazione", come sopra, riguarda il formato dell'output piuttosto che la verità.

La rete è adatta a un ambito piuttosto ristretto. Buona per: classificazione e routing ad alto volume, passaggi di guardrail e verifica, decisioni critiche per la latenza, valutazione in parallelo di grandi insiemi di documenti, ovunque la risposta corretta sia davvero una scelta, un numero su una scala o un booleano. Scarsa per: generazione aperta di qualsiasi tipo, ragionamento su contesti lunghi, dialogo multi-turno o qualsiasi attività la cui risposta corretta sia una frase. Se il tuo problema non si riduce a una domanda tipizzata, Jev non è un modo più economico per risolverlo — non è affatto un modo per risolverlo.

C'è anche una critica giusta all'inquadramento che vale la pena portare avanti. Definire Jev un modello di frontiera si appropria di una credibilità che il modello non si è guadagnato: non sa programmare, conversare o scrivere una frase, e i grafici di confronto si affidano ai modelli di frontiera come baseline, mentre la colonna dell'accuratezza racconta una storia diversa. L'affermazione più difendibile, e quella che le prove supportano effettivamente, è che TypeSafe ha spinto molto più avanti la frontiera della velocità e dei costi per le decisioni strutturate. È una cosa considerevole da aver fatto. È una cosa diversa dal costruire un modello che rivaleggia con GPT-6 Astra o Claude Fable 5.1.

Cosa cambierebbe questo quadro?

Tre cose, all'incirca in ordine di quanto conterebbero.

• Un articolo pubblicato sull'architettura o pesi aperti. Tutto su come Jev raggiunge la sua velocità è attualmente una scatola nera, e l'affermazione che la valutazione parallela sia il meccanismo — l'analogia che Almeida traccia è sostituire il calcolo sequenziale come i transformer hanno sostituito le reti ricorrenti — è un'asserzione piuttosto che un risultato dimostrato. Finché il design non sarà pubblicato, la velocità è un fatto e la spiegazione è marketing.

• Una seconda valutazione indipendente con un campione più ampio. I test di Every sono la prova più forte disponibile e coprono 12 passaggi sulla questione decisiva dell'accuratezza. Un'altra esecuzione indipendente, su qualche centinaio di casi etichettati, chiarirebbe se la mancata individuazione di un difetto su sette fosse rumore o il vero tasso di errore.

• Un audit di calibrazione su input realistici e disordinati. Tutto ciò che è stato pubblicato finora utilizza harness di test puliti. La questione aperta per un modello il cui intero valore aggiunto si basa su punteggi di confidenza affidabili è cosa fanno quei punteggi nei casi genuinamente ambigui — quelli in cui anche un revisore umano esiterebbe. È questo il numero che determina se Jev è sicuro come base per l'automazione, e nessuno lo ha pubblicato.

Fino ad allora, l'atteggiamento ragionevole è specifico anziché generale. Jev è un modello reale, già distribuito, insolitamente economico, con un autentico vantaggio strutturale nell'affidabilità dell'output, un profilo di accuratezza che si colloca intorno alla fascia media e un'affermazione sulla calibrazione che è plausibile, esplicitamente raccomandata per l'autotest dal suo stesso fornitore e convalidata in modo indipendente solo su un piccolo campione. Se il tuo flusso di lavoro ha un passaggio che si riduce a una domanda digitata posta abbastanza spesso da rendere uno spreco un modello di frontiera, questo è uno dei modi più economici per porla — e il valore di confidenza che restituisce è la parte da testare prima di fidartene, non la velocità.

Confrontati in questo articolo1

Rilevato da questo articolo · Benchmark: Artificial Analysis · aggiornato ogni giorno