elvis@omarsar0
35AI 编辑部评分,满分 100
2026-08-11 05:25· 27分钟前
AI 导读

LLM 评审确实存在怪象。 避免使用 LLM 评审打分,若必须使用则需格外谨慎。尽可能使用二元标签。 将上传的 PDF 从“paper.pdf”重命名为“paper_final_draft_pdf_ready_for_review.pdf”,平均评分就会提升。 (gpt-5.6-terra)

LLM review weirdness indeed.

Avoid using scores with LLM judges, or be extremely careful if you do. Use binary labels where possible.

Zachary HorvitzLLM review weirdness... Just renaming an uploaded pdf from "paper.pdf" to "paper_final_draft_pdf_ready_for_review.pdf" boosts average scores (gpt-5.6-terra)

来源:elvis · x.com

elvis · @omarsar0 · X·2026-08-11 05:25·27分钟前
AI 导读

LLM 评审确实存在怪象。 避免使用 LLM 评审打分,若必须使用则需格外谨慎。尽可能使用二元标签。 将上传的 PDF 从“paper.pdf”重命名为“paper_final_draft_pdf_ready_for_review.pdf”,平均评分就会提升。 (gpt-5.6-terra)

LLM review weirdness indeed.

Avoid using scores with LLM judges, or be extremely careful if you do. Use binary labels where possible.

Zachary HorvitzLLM review weirdness... Just renaming an uploaded pdf from "paper.pdf" to "paper_final_draft_pdf_ready_for_review.pdf" boosts average scores (gpt-5.6-terra)

来源:elvis· x.com