hdf5ファイルを使用してデータセットをトレーニングしていますが、ログにはhdf5ファイルが3回読み込まれていることが示されています。なんでだろう？
私が使用しているトレーニングには 4 GPUs
0830 10:51:06.050088 24335 hdf5_data_layer.cpp:79] Loading list of HDF5 filenames from: /train_h5_list.txt
I0830 10:51:06.055855 24336 hdf5_data_layer.cpp:79] Loading list of HDF5 filenames from: /train_h5_list.txt
I0830 10:51:06.066175 24335 hdf5_data_layer.cpp:93] Number of HDF5 files: 8259
I0830 10:51:06.071753 24336 hdf5_data_layer.cpp:93] Number of HDF5 files: 8259
I0830 10:51:06.878861 24337 hdf5_data_layer.cpp:79] Loading list of HDF5 filenames from: /train_h5_list.txt
I0830 10:51:06.900501 24337 hdf5_data_layer.cpp:93] Number of HDF5 files: 8259
私が知る限り、複数を使用する場合GPUs、hdf5ファイルはGPUごとに複数回ロードされます！これは問題を引き起こす可能性があり、ファイルを使用GPUsしてトレーニングするときに複数を使用することはお勧めしませんhdf5
この記事はインターネットから収集されたものであり、転載の際にはソースを示してください。
侵害の場合は、連絡してください[email protected]
コメントを追加