這也許不是問這個問題的合適地方,但我不確定還能去哪里問這個問題。我的碩士論文旨在嘗試使用并行計算來加速隨機生物學模擬。我已經為模擬的并行化編寫了一些標準格式的代碼。pool.map此代碼適用于我的 9 個模擬中的 7 個,但在其他兩個上使用時似乎卡住了。由于在家等工作和硬件/軟件限制,我唯一可用的操作系統是適用于 Linux 的 Windows 子系統和 Windows powershell(我都嘗試過)。我的主管建議的一件事是,這個問題可能與我的操作系統有關,Windows 在并行化方面可能不如 Linux。但我正在努力尋找任何確鑿的證據來支持這一點。那么有沒有人知道任何論文或指向其他帖子的鏈接可能提供有關 Windows 操作系統是否存在 Python 并行處理問題的一些信息?干杯
1 回答

HUX布斯
TA貢獻1876條經驗 獲得超6個贊
我不知道正式論文,但使用dask.org的 dask 取得了很多實際成功?所以這是否是一個好的答案在很大程度上取決于你是否只想要結果,或者你是否正在進行深入研究。
我和我的團隊大約一年前開始使用 dask 來并行化需要Pandas/numpy
數小時才能運行的大型作業(如果它們沒有耗盡內存)。使用 dask,我們能夠將這些時間縮短到幾分鐘,并獲得成功(即相同)的結果。
仍然建議使用大量 RAM,但并行化功能和流程儀表板/反饋是向前邁出的一大步。
添加回答
舉報
0/150
提交
取消