> 我第一次尝试了一件新事物,就是在开发过程中保持写日记
> 我第一次尝试了一件新事物,就是在开发过程中保持写日记。一定要这样做!!!我再怎么强调都不为过!如果你在专业的科学实验室工作,比如物理、生物、化学,你被期望保持实验日记。这对你比对公司更有帮助(知识沉淀、责任界定等)。我无法告诉你有多少次,一些看似无害的愚蠢评论救了我的命。它们价值连城。对于ML实验,我使用wandb和hydra[0]。把所有的配置都放到hydra中。要非常严谨。你应该记录你的随机种子、版本、日期,我意思是所有东西。设置这只需要几分钟,但当你需要它的时候,它会为你节省数小时。把所有这些内容都放到wandb和你的模型检查点中。你会忘记那个检查点对应的是什么。大量使用wandb的标签和评论(通过hydra你可以将这些作为cli参数来自动化,即使从slurm脚本启动也可以)。开启wandb的代码保存功能。最重要的是,使用wandb提供的笔记本。不要担心它变得混乱。…
源讨论将神经网络编译为C以提高速度原帖 93 条评论 · 导入时统计