Wygenerowana karta tytułowa z napisem „RLCD, wyjaśnione” nad podtytułem „Uczenie ze wzmocnieniem dla skalibrowanych decyzji — metoda treningowa, którą TypeSafe tak nazywa na potrzeby Jev 1.13.”, umieszczona nad trzema opisanymi kartami: „RLHF — optymalizuje pod kątem odpowiedzi, którą preferuje człowiek.”, „RLVR — optymalizuje pod kątem wyników, które program może zweryfikować.” i „RLCD — optymalizuje pod kątem uczciwości deklarowanego prawdopodobieństwa.”, z wierszem „RLHF i RLVR to dwie starsze metody. RLCD to trzecia metoda TypeSafe.” oraz stopką o treści „Nazewnictwo i ujęcie RLCD zgodnie z własnym wpisem TypeSafe na temat premiery oraz wprowadzeniem do AI, przeczytane 2026-09-30.” Logo OrcaRouter jest wkomponowane w prawym dolnym rogu.
Guides & Insights

RLCD wyjaśnione: Dlaczego TypeSafe uczy Jev, by był szczery w kwestii pewności siebie, zamiast być lubianym

Autor

Magnus Corvin

Data publikacji

Najnowsze modele · 20Zobacz wszystkie modele →
Benchmarki: Artificial Analysis · aktualizowane codziennie
Powrót do wszystkich wpisów

Jev 1.13 (typesafe/jev-1.13) jest trenowany metodą, którą jego twórca nazywa Reinforcement Learning for Calibrated Decisions — RLCD — a ten akronim to własny wymysł TypeSafe, a nie branżowy termin, który powinieneś już znać. Wpis o premierze mówi to wprost: firma zbudowała "nową architekturę modelu, równoległy sampler dla maksymalnej wydajności oraz metodę treningową, którą nazywamy Reinforcement Learning for Calibrated Decisions (RLCD)". To trzecia odpowiedź na pytanie, które kiedyś miało dwie, a powód, dla którego istnieje, to niedopasowanie, na które większość zespołów natrafia, gdy po raz pierwszy próbuje umieścić model językowy w decyzji. Zanim do tego przejdziemy, znaczenie mają dwie daty, ponieważ ta strona nie jest tekstem premierowym. TypeSafe udostępnił sam model w dniu 2026-09-15, co wypada poza siedmiodniowym oknem, które obejmuje ten blog, i niczego tutaj nie należy odczytywać jako przedstawiania Jev jako nowości. Wydarzeniem z datą jest 2026-09-24, kiedy OrcaRouter dodał typesafe/jev-1.13 do własnego katalogu i otworzył dla niego kartę modelu — pierwszy raz, gdy Jev można wywoływać przez bramę zewnętrznego dostawcy, a nie tylko przez własny punkt końcowy TypeSafe. To jest zmiana, na której opiera się ta strona, a praktyczna konsekwencja jest taka, że poniższą technikę możesz teraz wypróbować w kodzie na kluczu, który być może już posiadasz, a nie jest to pomysł badawczy, o którym czytasz.

To, co następuje, to koncepcja, a nie model. Pierwsza trzecia część tej strony dotyczy dwóch metod treningowych, przeciwko którym zaprojektowano RLCD, ponieważ RLCD można odczytać jedynie jako naprawę tego, co robią tamte dwie, gdy zadanie przestaje być rozmową, a staje się osądem. Jeśli już wiesz, do czego optymalizują RLHF i RLVR, sekcja, której szukasz, to trzecia, w której całą pracę wykonuje własna trójdzielna tabela TypeSafe.

RLHF optymalizuje pod kątem odpowiedzi, którą preferuje dana osoba

Uczenie ze wzmocnieniem na podstawie informacji zwrotnej od ludzi to metoda, która przekształciła wstępnie wytrenowane modele językowe w asystentów. Własne wprowadzenie TypeSafe określa ten cel bez ogródek, na karcie zatytułowanej RLHF: metoda ta „przekształciła wstępnie wytrenowane modele w chatboty. Uczy modele generowania odpowiedzi, które ludzie wolą”. InstructGPT i ChatGPT zostały wytrenowane z jej użyciem, a wprowadzenie dodaje szczegół istotny tutaj z innego powodu — podejście to współtworzył Diogo Almeida, współzałożyciel TypeSafe i autor wpisu z okazji premiery Jev. Firma nie odrzuca metody — została założona przez kogoś, kto pomógł ją zbudować. Twierdzi natomiast, że cel ten jest niewłaściwy dla konkretnego zadania.

Najprostszym sposobem dostrzeżenia tej rozbieżności jest zapytanie, co właściwie mierzy sygnał nagrody. W ramach RLHF mierzy on preferencję oceniającego między dwiema kandydackimi odpowiedziami. To znakomity wskaźnik zastępczy, gdy produktem jest rozmowa, ponieważ kryterium sukcesu rozmowy rzeczywiście polega na tym, czy człowiek uznaje odpowiedź za dobrą. To wadliwy wskaźnik zastępczy, gdy produktem jest decyzja, ponieważ kryterium sukcesu jest tam to, czy deklarowana pewność odpowiada rzeczywistości, a oceniający porównujący dwa wiarygodnie brzmiące akapity nie ma sposobu, by dostrzec różnicę między dobrze skalibrowanym 0,6 a brzmiącym pewnie 0,95. Dwie odpowiedzi mogą być równie preferowane, a jednocześnie ogromnie różnić się pod względem tego, jak bardzo dany fragment oprogramowania powinien im ufać.

Tryby awarii, które TypeSafe wymienia w podręczniku, wynikają bezpośrednio z tego:

• Sykofancja — model uczy się generować to, co oceniający chce usłyszeć, co jest innym celem niż prawda.

• Przekonująco brzmiąca halucynacja — płynność i pewność są nagradzane przez preferencje, nawet gdy nic za nimi nie stoi.

• Porzucanie modów — optymalizacja preferencji zawęża rozkład wyjściowy, „faworyzując określony styl, taki jak podążanie za instrukcjami, jednocześnie zmniejszając prawdopodobieństwo innych możliwych wyjść”. Porzucanie modów to łagodniejsza wersja klasycznego problemu załamania modów, który trapi generatywne sieci przeciwstawne, gdzie generator zbiega do jednego wyjścia, które wciąż oszukuje dyskryminator.

Akapit ostrzegawczy samego wprowadzenia to zdanie, które warto zachować: „Wynik może być przekonujący dla człowieka, a jednocześnie nie być wystarczająco niezawodny do automatyzacji bez nadzoru. Ludzkie preferencje i wiarygodność maszyn to różne cele optymalizacji”. To nie jest krytyka RLHF jako metody. To spostrzeżenie, że modelowi trenowanemu na preferencjach nigdy nie zadano pytania, na które automatyzacja potrzebuje odpowiedzi — jak często, dokładnie, ta rzecz ma rację, gdy twierdzi, że jest pewna.

RLVR optymalizuje pod kątem wyników, które program może sprawdzić — a decyzje rzadko taki mają

Uczenie ze wzmocnieniem z weryfikowalnymi nagrodami to druga adaptacja i to ona stoi za modelami rozumującymi. Wprowadzenie TypeSafe opisuje, co powstało: modele, które „są mocne w zadaniach takich jak matematyka, ale wolniejsze i droższe”. Mechanizm to sprawdzacz. Jeśli zadanie ma odpowiedź, którą program może przetestować — test jednostkowy, sprawdzacz dowodów, odpowiedź numeryczną — to nagroda może być obliczona bez pytania człowieka o cokolwiek, a model może być trenowany na tym sygnale na dużą skalę. To działa i dlatego modele rozumujące stały się dobre dokładnie w tych dziedzinach, w których istnieje tania automatyczna weryfikacja.

Ograniczenie tkwi w kształcie tego słowa: „weryfikowalny”. Weryfikowalna nagroda wymaga weryfikatora, a weryfikator wymaga, aby zadanie miało poprawną odpowiedź, którą ktoś może obliczyć. Rozważmy pytania, które rzeczywiście zadaje system produkcyjny. Czy to zgłoszenie wsparcia powinno trafić do działu rozliczeń, czy do działu technicznego? Czy ta prośba o zwrot jest zgodna z polityką? Czy ta transakcja wygląda na oszustwo? Każde z nich ma w większości przypadków odpowiedź, której można bronić, żadne nie ma odpowiedzi, którą mógłby sprawdzić program, a przypadki, które mają największe znaczenie, to dokładnie te, w których doświadczeni ludzie się nie zgadzają. Nie ma funkcji do uruchomienia. RLVR nie ma czego nagradzać, więc nie wnosi niczego.

Kuszącym obejściem jest wytworzenie weryfikatora poprzez etykietowanie zbioru danych i trenowanie względem etykiet. Daje to metodzie coś do przetrawienia, ale zmienia cel w istotny sposób. Etykiety kodują decyzję, a nie niepewność z nią związaną. Model trenowany do odtwarzania osądów jednego zespołu w trudnych przypadkach uczy się takiej pewności siebie, jaką wyrażały te etykiety — czyli dokładnie takiej samej nadmiernej pewności siebie, jaka cechowała ludzi, którzy je napisali. A nawet tam, gdzie prawdziwy weryfikator istnieje, występuje druga luka. Weryfikator ocenia odpowiedź. Nie ocenia deklarowanej pewności. Model, który ma rację w 95% przypadków i w każdym z nich zgłasza pewność, otrzymuje doskonałą nagrodę, a jako komponent zautomatyzowanego potoku jest bezużyteczny — ponieważ te 5% to jedyna część, o której potok musiał zostać poinformowany. Materiały premierowe TypeSafe przedstawiają ten sam argument z przeciwnej strony: „Jeśli model potrafi wykonać zadanie w 95% przypadków, ale nie mówi, kiedy znajduje się w tych 5%, nie może zautomatyzować tego zadania.”

Co robi RLCD, w ujęciu samego TypeSafe

RLCD zmienia kontrakt dotyczący wyników, a nie jakość odpowiedzi. Karta wprowadzenia głosi: „Uczenie ze wzmocnieniem na potrzeby skalibrowanych decyzji trenuje TypeSafe, aby zwracał decyzje i skalibrowane prawdopodobieństwa zamiast wygenerowanego tekstu”. Zwięzła wersja z posta premierowego brzmi: „skalibrowane decyzje: odpowiedzi z epistemicznie uczciwymi prawdopodobieństwami w zadaniach System One”. Obie opisują jedno posunięcie: trenowanie modelu na podstawie tego, czy podane przez niego prawdopodobieństwo zgadzało się z częstością, z jaką ta odpowiedź okazywała się poprawna, a nie tego, czy odpowiedź spodobała się człowiekowi albo sprawdzaczowi.

Post premierowy zestawia trzy metody obok siebie, a kontrast jest najwyraźniejszym wyrazem tej idei, jaki istnieje. Czytaj to jako zbiór kontrastów, a nie tabelę:

• Na co optymalizuje — RLHF optymalizuje ludzkie preferencje, „opracowania i odpowiedzi czatowe, które preferują ludzcy oceniający”; RLVR optymalizuje „wyniki, które można zweryfikować programowo”; RLCD optymalizuje kalibrację, „odpowiedzi z epistemicznie uczciwymi prawdopodobieństwami w zadaniach Systemu 1”.

• Co trafia na wejście — dwa starsze przyjmują dane nieustrukturyzowane „z naciskiem na komunikaty sekwencyjne”; skalibrowany model decyzyjny przyjmuje dane nieustrukturyzowane „z naciskiem na ustrukturyzowany stan programu”.

• Co wychodzi — wygenerowane ciągi znaków, które „trzeba przeanalizować + zweryfikować”, z „zawsze pewnym ryzykiem, że AI wymknie się spod kontroli”, w zestawieniu z bezpiecznymi pod względem typów wartościami strukturalnymi, w których „możliwe wyniki i struktura są zdefiniowane z góry”, model „nigdy nie popełnia błędów typu”, a „wszystkie odpowiedzi są opatrzone skalibrowanymi prawdopodobieństwami i ocenami pewności”.

• Jak odbywa się próbkowanie — po jednym tokenie naraz, każdy uwarunkowany na poprzednim, w przeciwieństwie do wszystkich wyjść generowanych w ramach pojedynczego zapytania. To mechaniczny powód, dla którego trzecia metoda jest tania: nie ma pętli dekodowania, za którą trzeba płacić.

• Ile to kosztuje — tokeny wejściowe od 0,20 USD do 10 USD za milion w przypadku modeli porównawczych, a cena tokenów wyjściowych jest około pięciokrotnie wyższa od ceny tokenów wejściowych, w porównaniu z 0,042 USD za milion tokenów wejściowych i zerowym kosztem tokenów wyjściowych w Jev.

• Jak szybko odpowiada — od 3 do 329 sekund end-to-end w przypadku modeli frontier w porównaniu z 70 ms do 500 ms, co dostawca określa jako od 40x do 200x szybciej w przypadku zapytań w stylu System One.

• Co mówi o własnej pewności — dwa starsze „mają tendencję do nadmiernej pewności siebie i niespójności”, nawet gdy zostaną poproszone o oszacowanie pewności; RLCD „zawsze komunikuje pewność i niepewność przy każdym wyjściu”, przy czym „wyższa pewność oznacza wyższą dokładność”.

Ostatnia linia to właściwe twierdzenie o produkcie i można ją sfalsyfikować, czego nie można powiedzieć o pozostałych. „Wyższa pewność oznacza wyższą dokładność” to stwierdzenie o krzywej: pogrupuj odpowiedzi modelu według przypisanego im prawdopodobieństwa, a przedziały powinny być trafne w przybliżeniu z częstością deklarowaną przez prawdopodobieństwa. Dokumentacja TypeSafe dotycząca pewności szczegółowo określa kontrakt za pomocą nietypowo konkretnych liczb:

• Wyniki, którym przypisano prawdopodobieństwo 0,2, powinny występować w około 20% przypadków.

• Wyniki, którym przypisano prawdopodobieństwo 0,8, powinny występować w około 80% przypadków.

• Wyniki, którym przypisano prawdopodobieństwo 1,0, powinny występować w 100% przypadków.

A potem zdanie, które sprawia, że twierdzenie pozostaje uczciwe, w słowach samego dostawcy: „Te wskaźniki opisują grupy predykcji, a nie gwarancję co do jakiejkolwiek pojedynczej odpowiedzi”. To nie jest zastrzeżenie doklejone ze względów prawnych. Na tym polega cały sens kalibracji. Dobrze skalibrowany model, który mówi 0,8, nie obiecuje, że tym razem będzie miał rację; obiecuje, że w przypadku wszystkich odpowiedzi oznaczonych jako 0,8 około cztery na pięć było poprawne. Pojedyncza odpowiedź nic ci nie mówi. Tysiąc odpowiedzi w ciągu tygodnia mówi ci, czy krzywa jest prawdziwa.

A generated two-column scoreboard headed "RLHF / RLVR vs RLCD — the scoreboard", subtitle "RLCD (Jev 1.13)" on the right column, with six matching rows on each side: Optimises for (human preference, or a program's check, versus the stated probability being honest); Input (messages, in sequence, versus structured program state); Output (generated strings, parsed after the fact, versus typed values with probabilities); Confidence (overconfident and inconsistent, versus reported with every answer); Sampling (one token at a time, versus all outputs in a single query); and Cost (USD 0.20 to 10 per million input tokens, versus USD 0.042 per million input tokens, output free). A footer reads "Left column and RLCD framing are TypeSafe's own comparison, from its launch post and AI primer, read 2026-09-30." The OrcaRouter logo is composited in the bottom-right corner.

Ten sam kontrast trzech kart występuje w samej dokumentacji TypeSafe, która jest źródłem powyższego porównania i najlepszym miejscem, by sprawdzić sformułowania, zamiast przyjmować streszczenie na słowo. Poniższy zrzut przedstawia tę stronę w obecnej postaci: trzy karty dla trzech podejść po treningu, przy czym trzecia z nich podaje pełną nazwę RLCD.

A screenshot of the "Three post-training approaches" section of TypeSafe's AI primer documentation page, captured 2026-09-30. Beneath the intro line "Pretrained language models have been adapted in two major ways. TypeSafe adds a third. RLHF and RLVR are shown here for context; TypeSafe's training path is RLCD." sit three labelled cards: "RLHF — Reinforcement learning from human feedback turned pretrained models into chatbots. It trains models to produce responses people prefer."; "RLVR — Reinforcement learning with verifiable rewards created reasoning models that are strong at tasks such as mathematics, but slower and more expensive."; and "RLCD — Reinforcement learning for calibrated decisions trains TypeSafe to return decisions and calibrated probabilities instead of generated text."

Dwa kolejne szczegóły w dokumentacji dostawcy pokazują, jak głęboko metoda sięga w produkt. Po pierwsze, pewność jest wyprowadzana, a nie generowana: model zwraca pełny rozkład prawdopodobieństwa dla dostarczonych opcji lub poziomów, a wartość pewności to statystyka obliczona z kształtu tego rozkładu. Dlatego dokumentacja może mówić, że definicja nie ma znaczenia krytycznego — tak czy inaczej otrzymujesz surowy rozkład i możesz obliczyć własną statystykę, jeśli twoja pasuje lepiej. Po drugie, RLCD to jedyna rzecz, która kształtuje wagi. Strona TypeSafe poświęcona modelom podaje: „Jev nie jest dostrajany ani adaptowany metodą LoRA z użyciem danych klientów. Jest trenowany z RLCD, aby zwracać skalibrowane decyzje, a te same wagi obsługują każde konto”. Adaptacja do domeny odbywa się w zapytaniu — twój stan, twoje kryteria — a nie w checkpoincie dla poszczególnych klientów. Jakakolwiek kalibracja została wytworzona przez tę metodę, jest to kalibracja, którą otrzymuje każdy klient.

Dlaczego kalibracja jest tym, co sprawia, że tani model decyzyjny jest użyteczny

Skalibrowane prawdopodobieństwo samo w sobie nie jest interesujące. Staje się architekturą w momencie, gdy Twój kod rozgałęzia się na jego podstawie, a dokumentacja poziomu ufności TypeSafe opisuje dokładnie ten wzorzec jako trzy przedziały, z których każdy prowadzi do innego zachowania systemu.

• Wysoka pewność — działaj automatycznie. Model ma jednoznaczny odczyt i możesz kontynuować bez udziału człowieka.

• Średnia pewność — zachowaj ostrożność. Model ma rozsądną odpowiedź, ale nie jest pewien, więc potwierdź to z użytkownikiem, oznacz do przeglądu lub zbierz więcej informacji, zanim podejmiesz działania.

• Niska pewność — nie podejmuj działań. Skieruj sprawę do człowieka, poproś o wyjaśnienie lub przełącz się na inny system, ponieważ model mówi, że ma zbyt mało informacji, aby działać.

Dokumentacja wyraźnie mówi, że granice są do wytyczenia przez ciebie i powinny różnić się w zależności od konsekwencji: „Próg ufności to nie jedna liczba. Różne działania w tym samym systemie powinny być bramkowane na różnych poziomach w zależności od konsekwencji popełnienia błędu”. Ich przeanalizowany przykład ustala twardą dolną granicę na poziomie 0,5 — wszystko, co model zgłosi poniżej, jest kierowane do człowieka bez dalszej weryfikacji — a następnie stosuje wyższy próg dla działania destrukcyjnego niż dla działania tylko do odczytu. W twoim kodzie zapisana jest tolerancja ryzyka; model dostarcza do niego rzetelne dane wejściowe.

Ten wzorzec to cały argument za przepływem pracy z dwoma modelami i warto przedstawić go jako argument, a nie listę funkcji. Załóżmy, że chcesz mieć zautomatyzowany potok, który obsługuje pewną większość przypadków, a resztę eskaluje do większego modelu lub człowieka. Decyzja o eskalacji musi skądś wynikać. Jeśli tani model raportuje 0,98 dla wszystkiego, w tym dla przypadków, w których zgaduje, to gałąź nie ma czego testować i albo automatyzujesz wszystko — łącznie z wywołaniami, które powinien był eskalować — albo nie automatyzujesz niczego. Model, którego pewność niesie informację, jest jedynym rodzajem, który pozwala bezpiecznie zautomatyzować podzbiór, ponieważ tylko on potrafi powiedzieć, dla którego podzbioru jest niebezpieczny. Dokumentacja ujmuje ten sam punkt w jednej linijce, którą warto zacytować za jej dosadność: „Jeśli inteligentny system, czy to człowiek, czy maszyna, nie potrafi wyrazić uczciwej niepewności, nie można mu ufać”.

Istnieje drugi powód, dla którego ma to większe znaczenie dla taniego modelu niż dla drogiego, i to jest powód, dla którego historia routingu i historia RLCD to ta sama historia. Model w cenie 0,042 USD za milion tokenów wejściowych bez opłaty za wyjście jest wystarczająco tani, by konsultować go nieustannie — na każdym kroku pętli agenta, na każdym rekordzie w partii, na każdym zgłoszeniu w chwili jego nadejścia. Nieustanne konsultowanie go to dokładnie ta sytuacja, w której błędy modelu się kumulują, ponieważ nikt nie czyta jego wyników, zanim ktoś podejmie na ich podstawie działania. Pewność jest tym, co czyni to bezpiecznym. Taniość jest tym, co sprawia, że gałąź eskalacji jest opłacalna, ponieważ kosztowna ścieżka uruchamia się tylko dla ułamka przypadków, które tani model odrzucił. Żadna z tych połówek nie działa bez drugiej, a decyzja o routingu, która je łączy, to próg na liczbie, której RLCD daje powód do zaufania.

Uczciwe ograniczenie: skalibrowane nie jest poprawne

Najważniejsze, co należy dobrze zrozumieć w przypadku RLCD, to to, czego RLCD nie twierdzi. Kalibracja jest właściwością poziomów ufności, a nie gwarancją dotyczącą odpowiedzi, i dostawca mówi o tym we własnej dokumentacji, zamiast pozostawiać to krytykom. Strona System One: „Modele System One są trenowane do podejmowania skalibrowanych decyzji: ich prawdopodobieństwa są optymalizowane względem wyników, aby odzwierciedlać niepewność. Kalibracja jest mierzona dla grup predykcji; nie gwarantuje, że pojedyncza odpowiedź jest poprawna”. Model może być doskonale skalibrowany i nadal błędnie rozstrzygnąć twoje zgłoszenie, ponieważ 0,9 oznacza dziewięć na dziesięć, a to może być właśnie to dziesiąte.

Nasze własne dane z serwowania są tu użyteczną przeciwwagą, właśnie dlatego, że są pomiarami modelu w produkcji, a nie twierdzeniami o tym, co osiąga metoda. W siedmiodniowym okresie kończącym się 2026-09-30, w ruchu przez playground OrcaRouter od czasu dodania modelu do katalogu, karta Jev 1.13 raportuje 0,49% wskaźnika błędów na 76,2 mln tokenów, wraz z p50 czasu do pierwszego tokenu wynoszącym 151 ms, p95 wynoszącym 247 ms i około 349 tokenów wyjściowych na sekundę. Dwie rzeczy dotyczące tej liczby zasługują na powiedzenie wprost. Jest ona nasza, a nie dostawcy, i jest to okno kroczące, a nie stały zbiór testowy — to samo pole wskazywało 0,57% wcześniej w tym oknie, ponieważ jest przeliczane na podstawie siedmiu ostatnich dni ruchu na żywo, a wczorajsze wywołania wypadają z okna. Nie jest to również pomiar kalibracji. Wskaźnik błędów mówi, jak często coś szło nie tak w naszym ruchu; nie mówi, czy wartości pewności były uczciwe, co jest innym pytaniem i wymaga danych oznaczonych etykietami, aby na nie odpowiedzieć.

Jest to również praktyczna instrukcja, której udziela dostawca, w nocie dołączonej do swoich wytycznych dotyczących progów: „Prawidłowe wartości progowe zależą od Twojej domeny i skuteczności modelu w Twoim przypadku użycia. Zacznij od konserwatywnych progów, testuj na własnych danych i dostosowuj je w miarę obserwowania wyników”. RLCD to twierdzenie o tym, jak wytrenowano model. To, czy to twierdzenie utrzymuje się na Twoich danych wejściowych, jest pytaniem empirycznym i jest to jedna z niewielu właściwości modelu, które możesz przetestować bez jakiejkolwiek infrastruktury uczenia maszynowego — weź kilkaset przypadków, dla których masz już etykiety, pogrupuj odpowiedzi w przedziały według pewności, którą podał model, i sprawdź, czy przedziały są poprawne z częstością, którą deklarują. Jeśli przedział 0,9 jest poprawny w około 90% przypadków w Twoim ruchu, próg jest realny i możesz automatyzować powyżej niego. Jeśli wszystko skupia się powyżej 0,9, a dokładność nie nadąża, dowiedziałeś się czegoś bardziej przydatnego niż jakakolwiek liczba z nagłówków.

Dwa kolejne ograniczenia należy wymienić jednym tchem. Pierwsze z nich to brak publicznej karty benchmarku dla tego modelu, względem której można by cokolwiek zweryfikować — dostawca jej nie opublikował, a żaden ranking zewnętrzny nie obejmuje tego modelu; strona modelu w Artificial Analysis zwraca 404 na dzień 2026-09-30. Zatem argument o kalibracji opiera się na opisie treningu, udokumentowanej umowie i tym, co sam zmierzysz, a nie na opublikowanej krzywej. Drugie to fakt, że własne twierdzenia dostawcy o wydajności są jego własnymi: wpis inauguracyjny otwarcie zauważa, że oceny przepływu pracy stojące za nagłówkiem o szybkości i koszcie zostały stworzone przez jego zespół ds. możliwości modelu, że odpowiedzi końcowe, względem których są mierzone, są średnią dwóch zewnętrznych modeli, oraz że liczby są „na wyższym końcu rzeczywistych zysków”. Mówi również, że nie można udowodnić, iż ceny nie są subsydiowane. Nic z tego nie podważa metody treningowej, która jest odrębnym twierdzeniem od twierdzenia o szybkości, ale oznacza to, że argument za RLCD jest argumentem o projektowaniu celu, a nie ustalonym wynikiem empirycznym. Traktuj to jako hipotezę, którą możesz tanio przetestować, co jest lepszą pozycją niż ta, w której zostawia cię większość twierdzeń o metodach treningowych.

Co możesz z tym zrobić już dziś

Dwa człony tego argumentu spotykają się w jednym miejscu. RLCD to powód, dla którego warto rozgałęziać na podstawie pewności modelu decyzyjnego; próg w Twoim kodzie to miejsce, w którym znajduje się to rozgałęzienie; a eskalacja jest opłacalna tylko wtedy, gdy typowa ścieżka jest wystarczająco tania, by uruchamiać ją wszędzie. Jev 1.13 można wywoływać jako typesafe/jev-1.13 w OrcaRouter — jedno API dla ponad 200 modeli, 0% narzutu, cena katalogowa dostawcy przekazywana bez zmian, więc obniżka ceny przez dostawcę obowiązuje tutaj tego samego dnia — co oznacza, że ścieżka dla większości przypadków o wysokiej pewności i generatywna ścieżka eskalacji są rozliczane na tym samym kluczu, a nie w ramach dwóch umów z dostawcami. Nadal wywołujesz je w jego własnej postaci, POST /v1/systemone, bez strumieniowania, w kontekście 65 536 tokenów, ponieważ to nie jest trasa OpenAI chat-completions i nie jest włączone do punktu końcowego czatu. Dwie opatrzone datami uwagi z wydań SDK dostawcy warto znać, jeśli zamierzasz to podłączać: wersja 0.7.1, wydana 2026-09-21, dodała przykłady użycia z bramami AI, a wersja 0.7.2, wydana 2026-09-26, dodała dodatek http2 do pakietu Python. Ta druga to szczegół, który pojawia się tylko w informacjach o wydaniu — klient HTTP/2 jest wart tego, by go mieć w przypadku modelu, którego cała propozycja wartości opiera się na wymianach w obie strony trwających poniżej 200 milisekund.

Jeśli masz wynieść z tej strony jedną rzecz, niech będzie to kształt pytania, na które odpowiada RLCD. Nie brzmi ono: „czy model może być mądrzejszy”. Brzmi: „czy model potrafi mi powiedzieć, kiedy nie jest wystarczająco mądry — wystarczająco często i wystarczająco trafnie, żebym mógł zautomatyzować resztę”. To inny cel badawczy niż dwa, którymi ta dziedzina zajmowała się przez ostatnie kilka lat, i jedyny, który daje liczbę, na której twój kod może działać. Tą liczbą jest wartość ufności. Zanim jej zaufasz, przetestuj ją na własnych etykietach, i zacznij od progu, co do którego pomyłka byłaby dla ciebie wstydliwa, a nie od takiego, co do którego chciałbyś mieć rację.

Ostatni element obrazu warto nieść razem z tym wszystkim, bo to liczba, do której zmierza cały wywód, i jest zmierzona, a nie tylko deklarowana. Poniższa karta to nasz własny siedmiodniowy zapis serwowania dla typesafe/jev-1.13 — modelu w działaniu, a nie metody trenowania i nie benchmarku. Czytaj ją jako drugą połowę pytania o kalibrację: wartości ufności mówią, na których wywołaniach działać, a to mówi, jak bliska reszta decyzji o routingu jest systemowi, który zostawiłbyś bez nadzoru.

A screenshot of the PERFORMANCE panel on the OrcaRouter model card for typesafe/jev-1.13, captured 2026-09-30, showing four tiles — P50 TTFT 151 ms, P95 TTFT 247 ms, OUTPUT SPEED 349 tok/s and ERROR RATE 0.49% — above a chart headed "Last 7-day latency trend" with a vertical axis running 0 to 2500 ms and daily points labelled 09-24 through 09-30, and a legend reading "p50 TTFT" and "p95 TTFT".