PHP如何对CSV大文件进行读取并导入数据库？

对于数百万条数据量的CSV文件，文件大小可能达到数百M，如果简单读取的话很可能出现超时或者卡死的现象。

为了成功将CSV文件里的数据导入数据库，分批处理是非常必要的。

下面这个函数是读取CSV文件中指定的某几行数据：

/**
 * csv_get_lines 读取CSV文件中的某几行数据
 * @param $csvfile csv文件路径
 * @param $lines 读取行数
 * @param $offset 起始行数
 * @return array
 * */
function csv_get_lines($csvfile, $lines, $offset = 0) {
 if(!$fp = fopen($csvfile, 'r')) {
 	return false;
 }
 $i = $j = 0;
	while (false !== ($line = fgets($fp))) {
		if($i++ < $offset) {
			continue; 
		}
		break;
	}
	$data = array();
	while(($j++ < $lines) && !feof($fp)) {
		$data[] = fgetcsv($fp);
	}
	fclose($fp);
 return $data;
}

调用方法：

$data = csv_get_lines('path/bigfile.csv', 10, 2000000);

print_r($data);

函数主要采用行定位的思路，通过跳过起始行数来实现文件指针定位。

至于数据如何入库本文不再详细讲述。

上述函数对500M以内的文件进行过测试，运行通畅，对于更大的文件未做测试，请斟酌使用或加以改进。

这篇PHP读取CSV大文件导入数据库的实例就是小编分享给大家的全部内容了，希望能给大家一个参考，也希望大家多多支持。

# 读取csv大文件导入数据库  # PHP上传Excel文件导入数据到MySQL数据库示例  # 如何解决phpmyadmin导入数据库文件最大限制2048KB  # 基于ThinkPHP+uploadify+upload+PHPExcel 无刷新导入数据  # PHP将Excel导入数据库及数据库数据导出至Excel的方法  # php快速导入大量数据的实例方法  # 行数  # 给大家  # 几行  # 大文件  # 更大  # 希望能  # 很可能  # 数百  # 这篇  # 来实现  # 小编  # 跳过  # 大家多多  # 数百万  # 未做  # csv_get_lines  # php  # class  # brush  # lines 

相关栏目： 【 网站优化151355 】 【 网络推广146373 】 【 网络技术251813 】 【 AI营销90571 】

相关推荐： 购物网站制作费用多少,开办网上购物网站，需要办理哪些手续？  悟空识字如何进行跟读录音_悟空识字开启麦克风权限与录音  Python并发异常传播_错误处理解析【教程】  如何快速生成凡客建站的专业级图册？  大学网站设计制作软件有哪些,如何将网站制作成自己app？  laravel怎么配置Redis作为缓存驱动_laravel Redis缓存配置教程  如何在HTML表单中获取用户输入并用JavaScript动态控制复利计算循环  香港服务器租用每月最低只需15元？  Laravel Fortify是什么，和Jetstream有什么关系  Laravel请求验证怎么写_Laravel Validator自定义表单验证规则教程  如何用搬瓦工VPS快速搭建个人网站？  详解免费开源的.NET多类型文件解压缩组件SharpZipLib（.NET组件介绍之七）  Laravel N+1查询问题如何解决_Eloquent预加载(Eager Loading)优化数据库查询  详解阿里云nginx服务器多站点的配置  Python企业级消息系统教程_KafkaRabbitMQ高并发应用  如何有效防御Web建站篡改攻击？  Laravel如何优化应用性能？（缓存和优化命令）  HTML透明颜色代码在Angular里怎么设置_Angular透明颜色使用指南【详解】  微信小程序 闭包写法详细介绍  Laravel如何使用Spatie Media Library_Laravel图片上传管理与缩略图生成【步骤】  Laravel如何实现事件和监听器？（Event & Listener实战）  网站建设保证美观性，需要考虑的几点问题！  如何用西部建站助手快速创建专业网站？  Windows家庭版如何开启组策略(gpedit.msc)？（安装方法）  今日头条微视频如何找选题 今日头条微视频找选题技巧【指南】  Laravel Livewire是什么_使用Laravel Livewire构建动态前端界面  Laravel怎么实现模型属性的自动加密  canvas 画布在主流浏览器中的尺寸限制详细介绍  Bootstrap CSS布局之列表  七夕网站制作视频,七夕大促活动怎么报名？  JS去除重复并统计数量的实现方法  🚀拖拽式CMS建站能否实现高效与个性化并存？  Win11搜索不到蓝牙耳机怎么办 Win11蓝牙驱动更新修复【详解】  laravel怎么使用数据库工厂（Factory）生成带有关联模型的数据_laravel Factory生成关联数据方法  如何实现javascript表单验证_正则表达式有哪些实用技巧  桂林网站制作公司有哪些,桂林马拉松怎么报名？  Laravel Session怎么存储_Laravel Session驱动配置详解  javascript中闭包概念与用法深入理解  如何用wdcp快速搭建高效网站？  Laravel怎么调用外部API_Laravel Http Client客户端使用  如何在局域网内绑定自建网站域名？  详解CentOS6.5 安装 MySQL5.1.71的方法  Laravel中的Facade(门面)到底是什么原理  详解Android图表 MPAndroidChart折线图  html5如何实现懒加载图片_ intersectionobserver api用法【教程】  制作ppt免费网站有哪些,有哪些比较好的ppt模板下载网站？  logo在线制作免费网站在线制作好吗,DW网页制作时，如何在网页标题前加上logo？  Laravel项目如何进行性能优化_Laravel应用性能分析与优化技巧大全  EditPlus 正则表达式 实战(3)  ChatGPT常用指令模板大全 新手快速上手的万能Prompt合集