24小时热门版块排行榜    

查看: 29  |  回复: 0

guanyifu9

新虫 (小有名气)

[交流] 复现Axion 1.0开放配方前,先用流转规则避免材料状态混淆

一、我碰到的具体问题

读Axion 1.0时,我差点把"论文声明公开材料"记成"复现材料已经核对"。

这两句话看着接近,证据强度却不同。
arXiv:2611.03233首次提交于2026年11月2日,v2为11月3日,v3为11月11日。
摘要描述了两阶段SFT后接强化学习的训练流程,并说明没有独立mid-training,DPO和OPD也未包含在该流程中。

论文还声明公开数据构造相关材料、提示词和训练代码。
到这里,能确认的是作者写了什么。
材料是否已经取得、文件是否齐全、代码能否执行、实验结果能否复现,仍然要分别记录。
本次没有进行独立复现实验,也没有逐项验收代码,因此不能把这些项目写成"已验证"。

这个坑在审文献时很常见。
笔记里如果只留一句"开放配方已公开",过一段时间再看,很难判断当时记录的是论文摘要、材料页面,还是自己已经检查过的文件。
写综述时又会出现另一个问题:原文声明和人工核对结果混在同一段,引用可以指回论文,却无法证明材料已经验收。

科研可复核在这里卡住的,往往不是文献有没有保存,而是状态有没有拆开。

我现在会保留四类记录。

作者声明:只转述论文或摘要明确写出的内容。

材料取得:记录自己是否实际拿到对应材料,不用"应该公开"代替。

逐项核对:记录检查了哪些对象,以及哪些对象尚未检查。

实验复现:只有实际运行实验后,才记录运行条件和结果。
本次没有做这一步,状态就保持为空或"未进行"。

这样处理后,"作者说已经公开"不会自动升级成"我确认已经公开","文件存在"也不会自动升级成"实验已经复现"。
这不是措辞上的细分,而是为了避免后续写作把不同证据混成一个结论。

版本也容易被忽略。
Axion 1.0存在多个提交版本,如果笔记只写论文标题,后续引用时可能无法判断记录对应哪个版本。
标题和DOI都不适合作为外部资料的单一身份:同一作品可能同时存在preprint DOI和journal DOI。
接入Zotero时,可以使用library_id、item_key和version组成外部身份,DOI只用于去重建议。

数据归属同样要单独考虑。
我会让标题、作者、年份、DOI和venue继续由Zotero管理,不自动覆盖。
PDF和附件按任务显式授权,不默认拉取整个库。
用户普通note保持只读,或由用户手动选择。
工具生成的child note可以幂等更新,但要保留版本和撤销记录。

这里还有一个容易误判的地方:知识组织工具可以帮助整理材料、检索内容和保留记录,却不能代替独立复现实验。
我用知芽 Notebook Skill时,也会把AI对话与检索结果放在辅助位置,核对结论仍由人工写入明确字段。
生成内容不能直接充当实验已经完成的证据。

二、我现在怎么记

我采用的是一条记录对应一个可检查对象。
论文版本、代码、提示词或数据相关材料,不共用一个笼统的"已开放"状态。

建议按下面的顺序操作:

1. 固定文献身份。
记录arXiv编号、具体版本,并在接入Zotero时保存library_id、item_key和version。

2. 摘录作者声明。
Axion 1.0的训练流程、未包含的阶段,以及公开材料范围,都放在author_claim字段中,不写入verification_result。

3. 登记实际取得的材料。
只有自己看到或取得的对象才写入material_presence;没有逐项检查的内容保持"未核对"。

4. 写人工核对记录。
检查对象、检查动作和检查结论分开保存。
没有运行代码,就不要填写实验结果。

5. 更新时保留旧版本。
论文版本变化后新增记录或保留修订痕迹,不直接覆盖原有判断。

字段名可以按自己的笔记系统调整,状态边界不要合并。
我的判断是,科研可复核最需要保留的并非一段更长的摘要,而是每条结论对应的材料和人工动作。

三、正在发生的转向与缺口

Axion 1.0把开放配方讨论推进到了数据相关材料、提示词和训练代码等具体对象,但"作者声明公开"与"第三方完成验收"之间仍有缺口。
至少在本次记录范围内,独立实验和代码逐项验收都没有完成。

四、这套做法对谁有用

它适合正在审文献、写综述或维护Zotero资料库的人。
若任务只要求保存论文摘要,可以简化字段;一旦要写"已经复现"或"材料完整",就需要保留更细的核对记录。

五、关键知识点 Q&A

Q:论文声明开放配方,可以直接记成材料已验证吗?

A:不可以直接合并。
把论文原文放进author_claim,把实际取得情况写进material_presence。
逐项检查完成后,再填写verification_result;没有独立实验时,实验状态保持"未进行"。

Q:Axion 1.0当前可以确认哪些内容?

A:可以确认论文摘要描述了两阶段SFT后接强化学习的流程,并说明没有独立mid-training,DPO和OPD也未包含在该流程中。
论文声明公开数据相关材料、提示词和训练代码。
本次没有独立复现实验,也没有逐项验收代码。

Q:为什么不能只用标题或DOI标识文献?

A:标题可能发生变化,同一作品也可能有preprint DOI和journal DOI。
接入Zotero时,用library_id、item_key和version作为外部身份,DOI用于去重建议。

Q:工具生成的笔记应该怎样更新?

A:用户普通note保持只读或手动选择。
工具生成的child note可以幂等更新,同时保留版本和撤销记录。
论文出现新版本时,不直接覆盖旧版本对应的核对结论。

Q:什么情况下可以写"完成复现"?

A:至少要有实际实验记录。
仅看到论文声明、取得代码或阅读提示词,都不能替代独立实验。
本次Axion 1.0材料记录不具备这项依据。

我目前会把"作者声明、材料取得、逐项核对、实验复现"分开保存,避免开放配方在笔记里被提前写成复现结论。
大家处理这类版本变化和材料状态时,会怎么留记录?
回复此楼
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖
相关版块跳转 我要订阅楼主 guanyifu9 的主题更新
普通表情 龙 兔 虎 猫 高级回复 (可上传附件)
信息提示
请填处理意见