亚洲在线久爱草,狠狠天天香蕉网,天天搞日日干久草,伊人亚洲日本欧美

為了賬號安全,請及時綁定郵箱和手機立即綁定
已解決430363個問題,去搜搜看,總會有你想問的

Windows 上的 Python 并行處理是否存在任何已知問題?

Windows 上的 Python 并行處理是否存在任何已知問題?

森欄 2023-05-09 15:17:21
這也許不是問這個問題的合適地方,但我不確定還能去哪里問這個問題。我的碩士論文旨在嘗試使用并行計算來加速隨機生物學模擬。我已經為模擬的并行化編寫了一些標準格式的代碼。pool.map此代碼適用于我的 9 個模擬中的 7 個,但在其他兩個上使用時似乎卡住了。由于在家等工作和硬件/軟件限制,我唯一可用的操作系統是適用于 Linux 的 Windows 子系統和 Windows powershell(我都嘗試過)。我的主管建議的一件事是,這個問題可能與我的操作系統有關,Windows 在并行化方面可能不如 Linux。但我正在努力尋找任何確鑿的證據來支持這一點。那么有沒有人知道任何論文或指向其他帖子的鏈接可能提供有關 Windows 操作系統是否存在 Python 并行處理問題的一些信息?干杯
查看完整描述

1 回答

?
HUX布斯

TA貢獻1876條經驗 獲得超6個贊

我不知道正式論文,但使用dask.org的 dask 取得了很多實際成功?所以這是否是一個好的答案在很大程度上取決于你是否只想要結果,或者你是否正在進行深入研究。

我和我的團隊大約一年前開始使用 dask 來并行化需要Pandas/numpy數小時才能運行的大型作業(如果它們沒有耗盡內存)。使用 dask,我們能夠將這些時間縮短到幾分鐘,并獲得成功(即相同)的結果。

仍然建議使用大量 RAM,但并行化功能和流程儀表板/反饋是向前邁出的一大步。


查看完整回答
反對 回復 2023-05-09
  • 1 回答
  • 0 關注
  • 136 瀏覽
慕課專欄
更多

添加回答

舉報

0/150
提交
取消
微信客服

購課補貼
聯系客服咨詢優惠詳情

幫助反饋 APP下載

慕課網APP
您的移動學習伙伴

公眾號

掃描二維碼
關注慕課網微信公眾號