c++怎么实现大文件的分块读写_c++ 文件指针seekp与seekg偏移控制【方法】

发布时间 - 2026-01-01 00:00:00    点击率:
大文件分块读写需用binary模式、64KB~1MB块大小、std::vector缓冲区,通过seekg/seekp按字节偏移定位,用gcount()校验实际读取量,避免内存溢出与文本模式陷阱。

大文件分块读写的典型做法

直接用 std::ifstream::read() 一次性读整个 GB 级文件会触发内存溢出或系统拒绝分配,必须分块。核心是控制每次读取的字节数,并用 seekg() 定位起始位置。

关键点:块大小不是越大越好——通常设为 64KB~1MB(655361048576),兼顾 I/O 效率与内存安全;避免用 std::string 存原始二进制块,改用 std::vector 或裸 char* 缓冲区。

  • file.seekg(offset, std::ios::beg) 跳转到指定字节偏移(注意:offsetstd::streamoff 类型,别用 int
  • 读完一块后,offset += chunk_size,继续下一轮
  • 最后一次读可能不足整块,需检查 file.gcount() 获取实际读取字节数
  • 写入时同理,用 ofstream.seekp(offset, std::ios::beg) 定位,再 write()

seekg/seekp 的偏移单位和常见错误

seekg()seekp() 的偏移量单位始终是「字节」,不是字符数、行号或记录数。对文本文件用 std::ios::atestd::ios::end 获取文件大小时,结果也以字节为单位,但要注意:

  • Windows 下若文件以文本模式打开(默认),\r\n 会被当成一个字符处理,seekg() 行为不可靠——必须用 std::ios::binary 模式
  • seekg(0, std::ios::end) 后调 tellg() 才能得到总字节数,但此时文件指针在末尾,后续读需先 seekg(0) 回开头
  • std::streamoff 在 32 位平台可能只有 4 字节,无法表示 >2GB 文件的偏移——编译时确保定义了 _FILE_OFFSET_BITS=64(Linux)或使用支持大文件的 CRT(MSVC 需 /D "_CRT_SECURE_NO_WARNINGS" + 正确链接)

二进制大文件分块拷贝的最小可行示例

下面代码实现从 src.bin 分块拷贝到 dst.bin,每块 1MB,显式控制偏移:

立即学习“C++免费学习笔记(深入)”;

#include 
#include 

int main() { std::ifstream src("src.bin", std::ios::binary); std::ofstream dst("dst.bin", std::ios::binary);

const size_t chunk_size = 1048576;
std::vector buf(chunk_size);

src.seekg(0, std::ios::end);
std::streamoff total = src.tellg();
src.seekg(0);

std::streamoff offset = 0;
while (offset zuojiankuohaophpcn total) {
    size_t to_read = std::min(chunk_size, static_castzuojiankuohaophpcnsize_tyoujiankuohaophpcn(total - offset));
    src.read(buf.data(), to_read);
    size_t actual = static_castzuojiankuohaophpcnsize_tyoujiankuohaophpcn(src.gcount());
    dst.write(buf.data(), actual);
    offset += actual;
}
return 0;

}

注意:src.gcount() 必须在每次 read() 后立即获取,它反映上一次读操作真实字节数;不能依赖 to_read,因为文件可能被并发修改或到达 EOF 边界。

seekp 写入时覆盖 vs 追加的陷阱

seekp() 定位后调 write(),行为取决于文件打开方式:

  • std::ios::binary 打开但没加 std::ios::trunc:写入会覆盖对应位置,文件长度不变(除非写到末尾之后,会扩展)
  • std::ios::app 时,seekp() 无效——所有写入强制追加到末尾
  • 想“随机写入”某块数据(如更新 ZIP 中某个文件),必须确保目标文件已存在且足够长(可用 seekp(file_size-1); write("\0", 1) 预扩展)

大文件场景下,seekp() 后写入比反复打开/关闭快得多,但务必确认磁盘空间充足——写入失败时不会自动回滚,容易产生半截损坏文件。


# linux  # windows  # app  # 字节  # ai  # c++  # ios  # win  # stream  # EOF  # String  # char  # int  # 指针  # ofstream  # ifstream  # 并发  # 大文件  # 行号  # 设为  # 写到  # 越好  # 越大  # 但要  # 文本文件  # 也以  # 但没 


相关栏目: 【 网站优化151355 】 【 网络推广146373 】 【 网络技术251813 】 【 AI营销90571


相关推荐: 如何在阿里云部署织梦网站?  瓜子二手车官方网站在线入口 瓜子二手车网页版官网通道入口  Laravel Livewire是什么_使用Laravel Livewire构建动态前端界面  js实现点击每个li节点,都弹出其文本值及修改  Win11怎样安装网易有道词典_Win11安装词典教程【步骤】  如何在不使用负向后查找的情况下匹配特定条件前的换行符  用v-html解决Vue.js渲染中html标签不被解析的问题  bing浏览器学术搜索入口_bing学术文献检索地址  Laravel怎么上传文件_Laravel图片上传及存储配置  Python文件异常处理策略_健壮性说明【指导】  免费制作统计图的网站有哪些,如何看待现如今年轻人买房难的情况?  Laravel如何使用Blade模板引擎?(完整语法和示例)  googleplay官方入口在哪里_Google Play官方商店快速入口指南  专业企业网站设计制作公司,如何理解商贸企业的统一配送和分销网络建设?  成都网站制作公司哪家好,四川省职工服务网是做什么用?  Win11任务栏卡死怎么办 Windows11任务栏无反应解决方法【教程】  Claude怎样写结构化提示词_Claude结构化提示词写法【教程】  Android 常见的图片加载框架详细介绍  Laravel如何自定义分页视图?(Pagination示例)  美食网站链接制作教程视频,哪个教做美食的网站比较专业点?  网站制作报价单模板图片,小松挖机官方网站报价?  Laravel怎么进行数据库回滚_Laravel Migration数据库版本控制与回滚操作  网站图片在线制作软件,怎么在图片上做链接?  Laravel广播系统如何实现实时通信_Laravel Reverb与WebSockets实战教程  js代码实现下拉菜单【推荐】  Laravel如何监控和管理失败的队列任务_Laravel失败任务处理与监控  JS经典正则表达式笔试题汇总  Mybatis 中的insertOrUpdate操作  JavaScript如何实现类型判断_typeof和instanceof有什么区别  Laravel怎么进行数据库事务处理_Laravel DB Facade事务操作确保数据一致性  如何用AI一键生成爆款短视频文案?小红书AI文案写作指令【教程】  JavaScript 输出显示内容(document.write、alert、innerHTML、console.log)  谷歌浏览器如何更改浏览器主题 Google Chrome主题设置教程  Laravel控制器是什么_Laravel MVC架构中Controller的作用与实践  Laravel如何实现URL美化Slug功能_Laravel使用eloquent-sluggable生成别名【方法】  常州企业网站制作公司,全国继续教育网怎么登录?  韩国网站服务器搭建指南:VPS选购、域名解析与DNS配置推荐  软银砸40亿美元收购DigitalBridge 强化AI资料中心布局  制作公司内部网站有哪些,内网如何建网站?  Laravel怎么实现搜索高亮功能_Laravel结合Scout与Algolia全文检索【实战】  如何在 Pandas 中基于一列条件计算另一列的分组均值  Laravel如何使用Service Provider服务提供者_Laravel依赖注入与容器绑定【深度】  Laravel怎么配置不同环境的数据库_Laravel本地测试与生产环境动态切换【方法】  深圳网站制作培训,深圳哪些招聘网站比较好?  合肥制作网站的公司有哪些,合肥聚美网络科技有限公司介绍?  Internet Explorer官网直接进入 IE浏览器在线体验版网址  Laravel如何使用API Resources格式化JSON响应_Laravel数据资源封装与格式化输出  想要更高端的建设网站,这些原则一定要坚持!  js实现获取鼠标当前的位置  google浏览器怎么清理缓存_谷歌浏览器清除缓存加速详细步骤