您好,欢迎访问一九零五行业门户网

MySQL导大量数据的程序实现方法

大家一定使用过 phpmyadmin 里面的数据库导入,导出功能,非常方便。但是在实际应用中,我发现如下几个问题: 1、数据库超过一定尺寸,比如6m 这时使用导出一般没问题,可以正确的保存到本机硬盘上面,但是导入则不行!原因是:一般的 php.ini 里面设置临时
大家一定使用过 phpmyadmin 里面的数据库导入,导出功能,非常方便。但是在实际应用中,我发现如下几个问题:
1、数据库超过一定尺寸,比如6m 这时使用导出一般没问题,可以正确的保存到本机硬盘上面,但是导入则不行!原因是:一般的 php.ini 里面设置临时文件/上传文件的大小限制为2m,而phpmyadmin使用了上传的方式,造成失败。
2、导出到硬盘的 .sql 文件在导回时,,经常出现由于某些单引号的问题引起失败,造成导入失败,只能用 mysql等应用程序导入了。
我的数据库已经超过10m,所以必须解决这个问题。我的思路:
导出: 用phpmyadmin 保存数据库/表格结构,用脚本读取数据库内容并保存到文件里面!
导入: 用phpmyadmin 恢复数据库/表格结构,用脚本读取文件,然后保存到库里面!
导出程序如下:调用方法为 ****.php?table=tablename
这个简单的程序目前一次保存一个表格!!每行为一个字段的数据!!
if($table==)exit();
mysql_connect(localhost,name,password);
mysql_select_db(database);
$result = mysql_query(select * from $table);
if(mysql_num_rows($result)
echo 开始转换数据到文本...
;
$handle = fopen($table.txt,w);
$numfields = mysql_num_fields($result);
fputs($handle,$numfields./r/n);
for($k=0;$k
{
$msg = mysql_fetch_row($result);
for($i=0;$i
{
$msg[$i] = str_replace(/r/n,&&php2000mysqlreturn&&,$msg[$i]);
$msg[$i] = str_replace(/n ,&&php2000mysqlreturn&&,$msg[$i]);
fputs($handle,$msg[$i]./r/n);
}
fputs($handle,------- php2000 dump data program v1.0 for mysql --------/r/n);
}
fclose($handle);
echo ok;
?>
导入的程序如下:用法同上面!
if($table==)exit();
mysql_connect(localhost,name,password);
mysql_select_db(database);
$message = file($table.txt);
echo $numfields = chop($message[0]);
for($k=1;$k
{
$value=;
for ($i=$k;$i
{
$tmp = str_replace(&&php2000mysqlreturn&&,/r/n,chop($message[$i]));
$value .= '.addslashes($tmp).',;
}
$tmp = str_replace(&&php2000mysqlreturn&&,/r/n,chop($message[$k+$numfields-1]));
$value .= '.$tmp.';
$query = insert into $table values (.$value.);
echo mysql_error();
mysql_query($query);
echo $k. ;
}
echo ok;
?>
使用方法和可能的问题!
1、导入时 file()函数可能会有问题(我的10m的数据没出现问题),可以改为 fopen()然后没次读一行!!
2、导入,导出都需要用 ftp 操作,也就是导出后,用 ftp 把数据转到本机,导入时先用ftp转移数据到服务器!
其它类似信息

推荐信息