CST中如何使用分布式計算進行參數掃描

作者 | Wang Yuanteng

我們知道，分布式計算非常適合進行參數掃描、優化這種互相獨立的任務。之前我們介紹了，FAQ117：如何安裝和設置分布式計算？

但不少用戶對參數掃描的設置仍有疑惑，下面我們將詳細介紹設置方法。

1：參掃選項。以時域求解器設置界面為例，在solver->Acceleration->DC，勾選Parameter sweep，輸入同時掃描的參數數量，該值直接影響下方token所需數量。

DC properties設置：

這里可以選擇use global setting，也就是所用solver server跟main controller中所設一致，main controller可以修改（Change global settings…），指向不同的main controller機器。

這兩個界面都有Loacl host information供參考。

或者我們可以點擊Use specified DC solver server去指定要使用的solver server。

2. 了解基本設置后，我們來說明下所需token數量。DC參數數量（N）指在多個solver server上同時進行計算的job數量，一般來說，應設為小于等于總的server數量，那么所消耗的token數為N個節點CPU和GPU所需token的總和，在設置界面下方token usage給出顯示。

當所設參數數量大于實際solver數量時，界面上所顯示的token數由參數數量N計算得到，但實際同時計算的參數和對應消耗的token由solver server數量決定，所以這么做不利于直接看所需token數量。

驗證一下：

條件所限，這里將兩臺電腦分成多個節點進行計算，PC1有6個節點，PC2有2個節點，共8個節點，設成8個參數。

從progress可以看到，任務被分配到2臺電腦的8個節點上進行計算。

從Main control可以看到全部節點都在running job。

如前面求解器界面顯示，使用了 2個S2T。

雖然這種情況下，兩臺電腦實際只有2顆CPU，但在8個server同時跑了8個job，每個server設為1個CPU，那么總共使用了8個CPU，按此計算得到token數量。有點用S2T換S2P的意思。

3. 最后一個問題，假如有80個參數，但只有8個server，DC參數設為8，那會怎么樣呢？Main Controller會分批處理這80個job，如下在progess看到waiting和pending狀態。