pytorchエラー:RuntimeError:received 0 items of ancdata解決
1289 ワード
詳細はリンクを参照
RuntimeError:received 0 items of ancdataエラーは、pytorchマルチスレッド共有tensorがファイルを開くことによって実現され、開くファイルの数が制限されているため、dataloaderがデータをロードするときに発生するエラーです.
共有するtensorがopen filesの制限を超えると、このエラーが発生することを確認できます.
解決策は2つあります.1、open filesの制限数を増やす: sudo ulimit-nコマンドは使用できません.実行する必要があります.2、マルチスレッドを修正するtensor方式がfile_System(デフォルトはfile_descriptor、open files数に制限):
RuntimeError:received 0 items of ancdataエラーは、pytorchマルチスレッド共有tensorがファイルを開くことによって実現され、開くファイルの数が制限されているため、dataloaderがデータをロードするときに発生するエラーです.
ulimit -a
core file size (blocks, -c) 0
data seg size (kbytes, -d) unlimited
scheduling priority (-e) 0
file size (blocks, -f) unlimited
pending signals (-i) 128088
max locked memory (kbytes, -l) 16384
max memory size (kbytes, -m) unlimited
open files (-n) 1024
pipe size (512 bytes, -p) 8
POSIX message queues (bytes, -q) 819200
real-time priority (-r) 0
stack size (kbytes, -s) 8192
cpu time (seconds, -t) unlimited
max user processes (-u) 128088
virtual memory (kbytes, -v) unlimited
file locks (-x) unlimited
共有するtensorがopen filesの制限を超えると、このエラーが発生することを確認できます.
解決策は2つあります.
sudo sh -c "ulimit -n 65535 && exec su $LOGNAME"
torch.multiprocessing.set_sharing_strategy('file_system')