c++中如何读取大文件_c++读取大文件的方法-C++-PHP中文网

c++中如何读取大文件_c++读取大文件的方法

穿越時空

发布： 2025-10-10 12:40:01

原创

268人浏览过

处理大文件时应避免一次性加载，采用分块读取。1. 文本文件可用std::getline逐行处理；2. 二进制或超大文件宜用固定缓冲区read()批量读取；3. 可禁用同步、解绑流、增大缓冲提升性能。关键是分块控制内存使用。

c++中如何读取大文件_c++读取大文件的方法

处理大文件时，C++需要避免一次性将整个文件加载到内存中，否则容易导致内存溢出。正确的方式是采用分块读取（流式读取），结合高效的I/O操作。以下是几种常用且有效的方法。

使用std::ifstream逐行读取

适合文本大文件，按行处理，每行读入内存后立即处理并释放。

打开文件后用std::getline()逐行读取
适用于日志、CSV等结构化文本文件
注意：行长度不可控，极端情况仍可能占用较多内存

示例代码：

#include <fstream>
#include <string>
#include <iostream>

std::ifstream file("large_file.txt");
std::string line;
while (std::getline(file, line)) {
    // 处理每一行
    std::cout << line << std::endl;
}
file.close();

登录后复制

使用缓冲区批量读取二进制或文本数据

对超大文件（GB级以上）推荐使用固定大小的缓冲区进行分块读取，控制内存使用。

移动端无限滚动加载瀑布流

里面有2个文件夹。其中这个文件名是:finishing，是我项目还没有请求后台的数据的模拟写法。请求后台数据之后，瀑布流的js有一点点变化，放在文件名是：finished。变化在于需要穿参数到后台，和填充的内容都用后台的数据填充。看自己项目需求来。由于chrome模拟器是不允许读取本地文件json的，所以如果你要进行测试，在hbuilder打开项目就可以看到效果啦，或者是火狐浏览器。

查看详情

立即学习“C++免费学习笔记（深入）”；

调用read()方法每次读取指定字节数
适合二进制文件或不需要按行解析的场景
可自定义缓冲区大小（如4KB、64KB）以平衡性能和内存

示例代码：

#include <fstream>
#include <vector>
#include <iostream>

const size_t BUFFER_SIZE = 65536; // 64KB
std::ifstream file("huge_file.dat", std::ios::binary);
std::vector<char> buffer(BUFFER_SIZE);

while (file) {
    file.read(buffer.data(), BUFFER_SIZE);
    size_t bytesRead = file.gcount();
    if (bytesRead == 0) break;

    // 处理buffer前bytesRead个字节
    processData(buffer.data(), bytesRead);
}
file.close();

登录后复制