Referee.chat деген эмне
Referee.chat панелдин алдында максатты аткарат. Сиз каалаган AI моделдерин орното аласыз - эки же алты, каалаган провайдерден - жана бир дагы судья. Судья маанилүү бөлүгү: ал максатты чындап эле аткарылганда чечим кабыл алат, жана ал "азырынча" дегенди "жакшы" дегенден көбүрөөк көп жолу айтууга арналган.
Эмне үчүн судья
Бир моделге кыйын суроо берип, туурабы же туура эмеспи деген жоопту тез табасыз. Бир нече моделге суроо берип, алар бири-бири менен көп учурда макул болушат, бул коррекция катары сезилет, бирок чындыгында андай эмес - моделдер машыгуу маалыматтарын жана көргөн жерлерин бөлүшөт. Ошондуктан, орундарды сиз тандайсыз: ар кандай провайдерлерден тартылган панелде ар кандай багытта ката кетирилет, алардын ортосундагы келишпестик сигналды алууга татыктуу. ката режими жооп туура эмес дегенди билдирбейт; бул процессте эч нерсе аны туура эмес деп таппай калганын билдирет.
Демек, дал келүү аргументтин сапатына жараша бааланбайт. Бул критерийлер кабыл алуу критерийлерине бөлүнүп, критерийлер гана аныкталат, эгерде анын артында бир нерсе болсо, аны үчүнчү тарап кайра текшере алат: бул булак, тиешелүү цитата, же код, ал чындыгында аткарылган жана анын чыныгы чыгарылышы. Арбитр чечим чыгарардан мурун бул далилди өзү кайра текшерет. Ишеним эч нерсеге карабайт.
Сиздин чен
Стандартты сиз тандап аласыз, жана арбитр аны сөзмө-сөз кармайт. Жакшы жооп сурасаңыз, ал сизге берилет. Clay Prize сыноосунан өтүп кетчү далилди сурасаңыз, чынчыл жыйынтык, адатта, панелдин кайсы жеринде кемчилик кеткенин так көрсөтөт - бул өзүңүздү текшерип көрүүгө туура келген ишенимдүү билдирүүдөн пайдалуу.
Затыгып калуу анын бир бөлүгү
Эгерде бир орундук дубалга тийсе, анда ал токтоп, бир конкреттүү суроону жооп берүү үчүн эң мыкты орундукка тапшырат, ошондой эле ал буга чейин эмнени аракет кылганын да. Ал суроону жөнөтөт, бирок транскрипцияны эмес. Моделдер тыгылып калганда, алар өздөрү толук баада кайрадан жооп беришет, жана бул аны максаттуу суроого айландырат, ал адаттагыдай эле блоктоону жоёт, текчелердин бир бөлүгү үчүн.
Узак иш сакталат
Панель түзгөн бардык маалыматтар бирдиктүү журналга жазылат, ошондуктан натыйжалар бир жолу жазылат жана эч качан кайра алынбайт, жана бүтпөгөн иштер жазылат, ошондуктан эч ким аларга кайтып келбейт. Соответствия выполняются на сервере и временно останавливаются - на бюджете, на провайдере, или потому, что вы закрыли закладку - и продолжаются точно оттуда, где остановились.