Što je Referee.chat?
Referee.chat pokreće cilj pored panela. Sjedite koliko god želite modela AI - dva, ili šest, od bilo koje prodavače - i još jedan sudija. Sudac je dio koji je važan: ona odlučuje kada je cilj stvarno ostvaren, i to je izgrađen da kaže 'ne' daleko češće nego što kaže 'done'.
Zašto sudija
Postavite jedan model teško pitanje i dobiti tečno odgovor je li to ispravno. Pitajte nekoliko i često se slažu jedni s drugima, što osjeća kao potvrda i nije — modeli dijele podatke o treningu i dijele slijepe točke. Zato su sjedala su vaše da bira: panel iz različitih prodavaca propadne u različitim smjerovima, a neslaganje između njih je signal vrijedi. Način neuspjeha nije da je odgovor pogrešan; to je da ništa u procesu nije ikada će ga uhvatiti biti pogrešno.
Dakle, utakmica nije postignuta na kvaliteti argumenta. Cilj se razgrađuje u kriterije prihvaćanja, a kriterij se riješava samo kada postoji nešto iza njega treća osoba može ponovno provjeriti: izvor s relevantnim odlomkom citirani, ili kod koji je zapravo izvršen i njegov pravi izlaz. Sudac ponovno provjeri da dokaze sami prije odluke. Povjerenje ne vrijedi ništa.
Ti si postavio šank.
Standard je vaš da birate, a sudac ga drži doslovno. Tražite odgovor odluke i dobijete jedan. Tražite dokaz koji bi preživjeli Clay Nagrada nadzor i iskren ishod je obično precizan račun gdje ploča pala – što je korisnije nego samopouzdano tvrdnje da bi se provjeriti u svakom slučaju.
Zaglaviti je dio toga.
Kada sjedalo udari u zid, zaustavlja se i postavlja jedno posebno pitanje na koje je mjesto najbolje za odgovor, zajedno s onim što je već pokušalo. Šalje pitanje, a ne transkript. Modeli kad se zaglavi – restauriraju po punoj cijeni - a to pretvara da u ciljano pitanje koje obično odblokira, za dio žetona.
Dug posao preživi
Sve što panel ustanovi ide u zajedničku knjigu, tako da rezultati su napisane jednom i nikada ponovno ne-izvedeni, i ćorsoki krajovi su snimljeni tako da nitko ne ulazi natrag u njih. Poklapa se s poslužiteljem-stranom i pauzirati čisto — na proračunu, na pružatelju ispada, ili zato što ste zatvorili karticu – i nastaviti točno gdje su stajali.