torchrun --nproc_per_node=8 --master_port=12341 -m script.train
--nproc_per_node=8:每个节点用8个GPU
--nproc_per_node=8
--master_port:主端口号
--master_port
-m:以模块形式运行
-m
pwd # print working directory
最后更新于4个月前