用c ++快速讀取文本文件我目前正在用c ++編寫一個程序,其中包括閱讀大量的大文本文件。每行有~400.000行,極端情況下每行有4000或更多字符。僅供測試,我使用ifstream和cplusplus.com提供的實現讀取其中一個文件。花了大約60秒,這太長了?,F在我想知道,有沒有一種直接的方法來提高閱讀速度?編輯:我使用的代碼或多或少是這樣的:string tmpString;ifstream txtFile(path);if(txtFile.is_open()){
while(txtFile.good())
{
m_numLines++;
getline(txtFile, tmpString);
}
txtFile.close();}編輯2:我讀的文件只有82 MB大。我主要說它可以達到4000,因為我認為可能有必要知道為了做緩沖。編輯3:謝謝大家的答案,但考慮到我的問題似乎沒有太大的改進空間。我必須使用readline,因為我想計算行數。將ifstream實例化為二進制文件也不會使讀取速度更快。我將嘗試盡可能地并行化它,至少應該起作用。編輯4:顯然我可以做一些事情。非常感謝你花了這么多時間,我非常感激!=)
3 回答

慕碼人2483693
TA貢獻1860條經驗 獲得超9個贊
Neil Kirk,遺憾的是我無法回復你的評論(信譽不足),但我對ifstream進行了性能測試,并且逐行讀取文本文件的性能完全相同。
std::stringstream stream;std::string line;while(std::getline(stream, line)) {}
在106MB文件上需要1426ms。
std::ifstream stream;std::string line;while(ifstream.good()) { getline(stream, line);}
這在同一個文件上需要1433ms。
以下代碼更快:
const int MAX_LENGTH = 524288;char* line = new char[MAX_LENGTH];while (iStream.getline(line, MAX_LENGTH) && strlen(line) > 0) {}
這在同一個文件上需要884ms。這只是有點棘手,因為您必須設置緩沖區的最大大?。摧斎胛募忻啃械淖畲箝L度)。
- 3 回答
- 0 關注
- 1325 瀏覽
添加回答
舉報
0/150
提交
取消