本文经AI新媒体量子位（公众号ID:QbitAI）授权转载，转载请联系出处。

到底是怎样的一个bug，能让95%的Pytorch库中招，就连特斯拉AI总监深受困扰？

还别说，这个95bug虽小，但有够“狡猾”的。

这就是最近Reddit上热议的一个话题，是一位网友在使用再平常不过的Pytorch+Numpy组合时发现。

最主要的是，在代码能够跑通的情况下，它甚至还会影响模%P型的准确率！

除此之外，网友热议的另外一个点，竟然是：

而是它到底算不算一个bug？

这究竟是怎么一回事？

事情的起因是一位网友发现，在PyTorch中用NumPy来生成随机数时，受到数据预处理yT的限制，会多进程并行加载数据，但最后每个进程返回的随机数却是相同的。

他还举出例子证实了自己的说法。

如下是一个示例数据集，它会返回三个元素的随机向量。这里采用的批量大小分别为2，工作进程为4个。

然or后神奇的事情发生了：每个进程返回的随机数都是一样的。

这个结果会着实让人有点一头雾水，就好像数学应用题求小明走一段路程需要花费多少时间，而你却算出来了负数。

发现了问题后，这位网友还在GitHub上ch下载了超过10万个PyTorch库，用同样的方法产生随机数。

结果更加令人震惊：居然有超过95%的库都受到这个问题的困扰！

这其中不乏PyTorch的官方教程和OpenAI的代码，连特斯拉AI总监K库都arpathy也承认自己“被坑过”！

但有一说一，这个bug想要解决也不难：只需要在每个epoch都重新设置seed，或者用python内置的随机数生成器就可以避免这个问题。

到底是不是bug？

如果这会中个问题已经可以解决，为什么还会引起如此大的讨论呢？

因为网友们的重点已经上升到了“哲学”层面：

这到底是不是一个bug？

在Reddit上有人认为：这不是一个bug。

虽然这个问题非常常见，但它并不算是一招的个bug，而是一个在调试时不可以忽略的点。

就是这个观点，激起了千层浪花，许多人都认为他忽略了问题的关键所在。

这不是产生伪随机数的问题，也不是numpy的问题，问题的核心是在于PyTorcbuh中的DataLoader的实现

对于包含随机转换的数据加载pipeline，这意味着每个worker都将选择“相同”的转换。

而现在NN中的许多数据加载pipeline，都使用某种类型的随机转换来进g！行数据增强，所以不重新初始化可能是一个预设。

另一位网友也表示这个bug其实是在预设程序下运行才出现的，应该向更多用户指出来。

并且95%以上的Pytorch库受此困扰，也绝不是危言耸听。

有人就特斯分享出了自己此前的惨痛经历：

我认识到这一点是之前跑了许多进程来创建数据集时，然而发现其中一半的数据是重复的，之后花了很长的时间才发现哪里出了问题。

也有用户补充说，如果 95% 以上的用户使用时拉A出现错误，那么代码就是错的。

顺便一提，这提供了Karpathy定律的另一个例子：即使你搞砸了一些非常基本代码，“neural nets want to work”。

你有踩过PyTorch的坑吗？

如上I总的bug并不是偶然，随着用PyTorch的人越来越多，被发现的bug也就越来越多，某乎上还有PyTorch的坑之总结，被浏览量高达49w。

其中从向量、函数到model.train()，无监都论是真bug还是自己出了bug，大家的血泪史还真的是各有千秋。

所以，关于PyTorch你可以分享的经验血泪史吗？

• ·标签: 华特迪士尼 戴明哲 罗伯特·艾格 迪士尼体验
• ·云计算开发：Python内置函数-reverse()函数详解
• ·云安全日报210415：红帽Web服务器发现CA证书验证漏洞，需要尽快升级
• ·视觉中国重磅升级！AI生成内容标识系统全面上线
• ·标签: Seedance2.0 火山引擎 字节跳动 MAAS
• ·玉米直男什么梗
• ·1 分钟快速使用 Docker 上手新版 Sentry-CLI - 创建一个版本
• ·云计算开发：Python内置函数-__import__()函数详解
• ·标签: 路易达孚 LDC 农产品贸易 可持续发展
• ·标签: 亚马逊 AWS Andy Jassy 芯片业务
• ·爆火的DeepSeek-V4 背后：北大开源框架One-Eval如何终结AI测评“噩梦”？
• ·云计算核心技术Docker教程：Docker 如何管理配置
• ·腾讯 QClaw 迎来大升级：DeepSeek-V4-Pro 接入，AI 专家“开箱即用”
• ·云安全日报201202：思科IOS XR网络互联操作系统发现执行未签名代码漏洞,需要尽快升级
• ·阻冲之什么梗
• ·西谷云田凤宾：算力体系在标准路线、体系架构方面仍然处于起步阶段