RuntimeError: received 0 items of ancdata

在使用torch.multiprocess时,由于子进程中进行了文件读写操作,因此出现了RuntimeError: received 0 items of ancdata的错误。执行ulimit -n查看单个进程的文件描述符限制为1024,程序中设置了num_workers=4,因此每次在第4096个iter处报错。

首先尝试进行了如下设置:

  torch.multiprocessing.set_sharing_strategy('file_system')

发现无法解决问题。然后尝试不使用torch.multiprocess,发现仍然会报错。

最终的结论是,问题不在于torch.multiprocess,只要将Dataloader的num_workers设为0即可。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
【社区内容提示】社区部分内容疑似由AI辅助生成,浏览时请结合常识与多方信息审慎甄别。
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

相关阅读更多精彩内容

  • 1说说JVM垃圾回收机制。 http://blog.csdn.net/xiajian2010/article/de...
    Alfred泉阅读 884评论 0 2
  • 原创链接 一、Java面试题java有多重要,对于做android的我们,不需要多说了,let’s go (1)J...
    李福来阅读 2,486评论 0 5
  • CSS 微软雅黑写法 “微软雅黑”使用英文“Microsoft YaHei” 内部阴影 css3 -- box-s...
    zlf_j阅读 2,711评论 0 2
  • 返回上一页: 点击回到顶部 解决办法: a标签跳转锚点到页面指定位置 https://blog.csdn.net/...
    zlf_j阅读 1,655评论 0 1
  • 接口测试(文章) 1.HTTP协议介绍https://blog.csdn.net/u011391839/artic...
    成功在于实践阅读 465评论 0 2

友情链接更多精彩内容