亚洲在线久爱草,狠狠天天香蕉网,天天搞日日干久草,伊人亚洲日本欧美

為了賬號安全，請及時綁定郵箱和手機立即綁定
已解決430363個問題，去搜搜看，總會有你想問的

數據量太大時，4G內存筆記本無法處理？

數據量太大時，4G內存筆記本無法處理？

zixian 2017-01-02 19:11:15
數據量太大，編寫的程序處理大量數據時，內存不足，無法運行，有什么方法通過網絡能夠解決的？
查看完整描述

2 回答

?
陸云帆

TA貢獻7條經驗 獲得超0個贊

這種情況本地就只能想辦法把你的中間結果序列化了存儲到本地磁盤，然后接著計算，最后相當于用I/O來代替你的內存。

分布式的大數據平臺也是一樣的原理，如果數據量太大，你可以考慮自己弄個單節點的Spark來做，即使內存不足了它也會自動幫你去解決中間結果序列化的問題。

查看完整回答
反對 回復 2017-01-26
?
JacXuan

TA貢獻12條經驗 獲得超1個贊

一般會想到用算法簡化程序，或者把程序移植到性能更好的電腦上。
查看完整回答
反對 回復 2017-01-02
  • 2 回答
  • 0 關注
  • 1700 瀏覽
慕課專欄
更多

添加回答

舉報

0/150
提交
取消
微信客服

購課補貼
聯系客服咨詢優惠詳情

 幫助反饋 APP下載

慕課網APP
您的移動學習伙伴

 公眾號

掃描二維碼
關注慕課網微信公眾號