prompts: 去掉填圆具体做法、例子换成无关领域、重写第零轮三份提示词;新增任务书 13(重测第零轮)
改了:roles/researcher.md、roles/experimenter.md;tasks/entry、discussion、claim、proposal、critique、explanation、wrapUp、response;TASK.md 开头两行。 Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
This commit is contained in:
@@ -19,9 +19,9 @@
|
||||
好的意见让作者能动手改,说清缺什么、在哪、不改会怎样:
|
||||
|
||||
- 坏:"这个提案不够严谨。"好:"协议的'什么时候停'只写了'收敛为止',没写判据和最大迭代数,实验员只能自己定,两个人会实现出不同的停止点,结果差异分不清来自改法还是停止点。"
|
||||
- 坏:"p2 好像太大了。"好:"p2 同时改了起点模板和起点之后的随机扰动,两件事单独放到基线上都说得通;合成一个因子,消融时只能一起关,分不出哪一件在出力。建议拆成两个因子;因子数已到上限的话,把其中一件留到下一轮再提。"
|
||||
- 坏:"保障可能有影响。"好:"保障 `legal-gate` 写的是'不合法的起点不参加择优',但检查做在'减 1e-9'之前,结构起点的线性规划解带 1e-16 级的违反,会全部被挡掉,而评测(容差 0、先合法化再判)本来会收它们。这是拦,而且拦了评测会收的东西,应当算一个因子、写明关掉时换回什么。"
|
||||
- 坏:"兜底解有点奇怪。"好:"保障 `fallback-structured` 在没有合格起点时改交一个结构解,这是补,可补上去的是一个能拿分的新答案,不是基线做法或报错。关掉 p3 以后只剩一个起点、又被门槛挡掉,这个兜底每次都会被用上——那一格量到的是兜底解,不是关掉 p3 的效果。应当算因子。"
|
||||
- 坏:"p2 好像太大了。"好:"p2 同时改了初始化方式和训练中途的学习率调度,两件事单独放到基线上都说得通;合成一个因子,消融时只能一起关,分不出哪一件在出力。建议拆成两个因子;因子数已到上限的话,把其中一件留到下一轮再提。"
|
||||
- 坏:"保障可能有影响。"好:"保障 `legal-gate` 写的是'不合法的候选不参加择优',但检查做在修正之前,修正前只带极小违反的那一类候选会全部被挡掉,而评测(先修到合法再判)本来会收它们。这是拦,而且拦了评测会收的东西,应当算一个因子、写明关掉时换回什么。"
|
||||
- 坏:"兜底解有点奇怪。"好:"保障 `fallback-backup` 在没有合格候选时改交一个备用解,这是补,可补上去的是一个能拿分的新答案,不是基线做法或报错。关掉 p3 以后只剩一个候选、又被门槛挡掉,这个兜底每次都会被用上——那一格量到的是备用解,不是关掉 p3 的效果。应当算因子。"
|
||||
|
||||
分轻重时,对每条意见想一想:作者不处理的话,结果会往哪边偏,会不会让这一轮的结论作废。会作废的,写清楚为什么;只是让结果不够干净的,一句带过。不用给每条标轻重。
|
||||
|
||||
@@ -39,7 +39,7 @@
|
||||
|
||||
### 推测要标出来
|
||||
|
||||
你没对照代码、也没有已测运行可以核实的判断,写成"(推测)",并说依据是什么。例如"σ=0.03 大概率改不动行数级的几何(推测:只凭扰动幅度和圆间距的量级比较,没有运行可查)"。这不是让你少写推测——推测常常正是最有用的意见——而是让后面读的人分得清哪句是查过的、哪句是猜的。上一份研究里,一条没标的推测被作者"同意"以后,两位预测的人直接拿它当依据,三个人的数一起偏到了同一边。
|
||||
你没对照代码、也没有已测运行可以核实的判断,写成"(推测)",并说依据是什么。例如"学习率降到 1e-4 大概率来不及在预算内收敛(推测:只凭步长和损失下降速度的量级比较,没有运行可查)"。这不是让你少写推测——推测常常正是最有用的意见——而是让后面读的人分得清哪句是查过的、哪句是猜的。上一份研究里,一条没标的推测被作者"同意"以后,两位预测的人直接拿它当依据,三个人的数一起偏到了同一边。
|
||||
|
||||
## 交什么
|
||||
|
||||
|
||||
Reference in New Issue
Block a user