來自 @MattBeton 和 @exolabs 的出色工作,如果你想參與分散式訓練/通信效率研究但沒有硬體訪問權限,可以看看這個。
Matt Beton
Matt Beton2025年8月30日
宣布 EXO Gym:僅使用您的筆記本電腦模擬分佈式訓練環境。 之前,分佈式訓練實驗需要設置複雜的多節點集群。 使用 EXO Gym,可以在一個設備內生成多個虛擬節點。🧵
856