- name
SKILL.md
ไฟล์สกิลยังคงอยู่ในรีโพซิทอรีของผู้เผยแพร่
วางคำสั่งที่คัดลอกไว้ในเทอร์มินัล คำสั่งจะติดตั้ง SKILL.md นี้ลงในเอเจนต์ตัวนั้น
npx skills add agentscope-ai/OpenJudge --skill 00-arena-router -a cursor -yวางคำสั่งที่คัดลอกไว้ในเทอร์มินัล คำสั่งจะติดตั้ง SKILL.md นี้ลงในเอเจนต์ตัวนั้น
npx skills add agentscope-ai/OpenJudge --skill 00-arena-router -a claude-code -yวางคำสั่งที่คัดลอกไว้ในเทอร์มินัล คำสั่งจะติดตั้ง SKILL.md นี้ลงในเอเจนต์ตัวนั้น
npx skills add agentscope-ai/OpenJudge --skill 00-arena-router -a codex -yวางคำสั่งที่คัดลอกไว้ในเทอร์มินัล คำสั่งจะติดตั้ง SKILL.md นี้ลงในเอเจนต์ตัวนั้น
npx skills add agentscope-ai/OpenJudge --skill 00-arena-router -a grok -yส่งข้อความที่คัดลอกไว้ในแชต Grok Bot แล้ว Bot จะดึง SKILL.md นี้จาก GitHub และเพิ่มลงในสกิลที่ Bot ทุกตัวของคุณใช้ร่วมกัน
Install this skill: https://github.com/agentscope-ai/OpenJudge/tree/HEAD/skills/arena-eval/00-arena-routerจากผู้เผยแพร่
Entry router for the arena-eval suite. You diagnose what the user wants to
compare models on and route them to the appropriate sub-skill or both when
the request spans both evaluation goals. You don't run comparisons yourself
— you're the triage desk.
Each sub-skill is self-contained: it carries inline everything it needs, so it can be installed and used on its own.
Ask (unless the user's request already makes the answer obvious):
To route you correctly: what are you comparing the models on?
a) A custom task of your own choosing (chatbot quality, summarization,
coding, anything) — you'll get win-rate rankings from a judge model
b) Specifically how often each model fabricates or hallucinates references
when asked to recommend citations
Shortcut rule: if the user already said "run an arena eval on my chatbot task" or "benchmark reference hallucination across these models", skip the question — the routing is already clear from their phrasing. Also skip the question when they explicitly ask for both general quality and citation accuracy; recommend both workflows.
Both workflows produce model rankings from head-to-head-style evaluation, but differ in what "correct" means:
01-auto-arena: correctness is judge opinion — an LLM judge scores
pairwise which response is better for an arbitrary task. Works for any task,
needs no ground truth.02-ref-hallucination-arena: correctness is externally verifiable —
every cited reference is checked against real bibliographic databases
(CrossRef/PubMed/arXiv/DBLP), so the ranking reflects factual accuracy, not
judge preference. Narrower scope (citation recommendation only) but higher
ground-truth confidence.If the user cares only about citation accuracy, prefer
02-ref-hallucination-arena over 01-auto-arena even if they phrase it as
"which model is better."
Recommended workflow: `[skill-name]`
Why: [one sentence tying the user's request to the triage table row]
Recommend one workflow when it covers the request. If the user asks for both
general quality and citation accuracy, recommend 01-auto-arena followed by
02-ref-hallucination-arena as separate runs (or follow the user's requested
order). Explain that the two runs measure different things and report their
results separately; neither ranking substitutes for the other.
>
---name: 00-arena-routerdescription: >---# skills/arena-eval/00-arena-router/SKILL.mdFAQ
ดาวน์โหลด skills/arena-eval/00-arena-router/SKILL.md จากผู้เผยแพร่ หรือคัดลอกพาธแล้วเปิดรีโพซิทอรี PlugMCP แสดงรายการสกิลเท่านั้น ไม่ได้โฮสต์ไฟล์
ผู้เผยแพร่เก็บไว้ที่ https://github.com/agentscope-ai/OpenJudge
Claude, Cursor, Codex และ Grok Build อ่าน SKILL.md ที่คุณเพิ่มจากรีโพซิทอรีของผู้เผยแพร่ได้ ส่วน Grok Bot จะติดตั้งให้เมื่อคุณส่งลิงก์โฟลเดอร์ GitHub ของสกิลในแชต