Python是如何判斷大數據唯一性的呢
1 回答
眼眸繁星
TA貢獻1873條經驗 獲得超9個贊
有些辦法。比如使用array, numpy.array。 主要的思路是節約內存的使用，同時提高數據查詢的效率。 如果能夠注意這些內容，處理幾個GB的數據還是輕松的。 接下來就是分布式計算。 按mapreduce的思路。數據盡量在本地處理。所以算法上要優化。
- 1 回答
- 0 關注
- 1061 瀏覽
添加回答
舉報
0/150
提交
取消