如何将大的.txt文件传输到MySQL？

我有一个数以百万计的字符串非常大的.txt文件，它有分离符号。如何将大的.txt文件传输到MySQL？

那么，将所有这些字符串转移到数据库的最简单方法是什么？它是PHP打开并采取爆炸每个字符串并将其插入数据库？

文件是2 GB。

来源

2011-07-31 good_evening

听起来正确。 –

您可以搜索/替换您的文件（使用'sed'或'awk'或'perl'）到SQL脚本中吗？ –

你可以看看它是否可以使用PHPMyAdmin导入。如果没有，您可以使用PHP创建一个可导入的文件。这可能比只按照记录导入记录更好。 – GolezTrol

使用phpmyadmin生成命令你，即：

LOAD DATA LOCAL INFILE 'input_file' INTO TABLE `tablename` FIELDS TERMINATED BY '|' LINES TERMINATED BY '\n'

从http://vegdave.wordpress.com/2007/05/19/import-a-csv-file-to-mysql-via-phpmyadmin/

来源

2011-07-31 22:16:24 boj

+1我以为phpmyadmin总是使用INSERT进口。 –

$mysql = mysql_connect("localhost", "user", "password"); 
mysql_select_db("database", $mysql); 
$filename = "file.txt"; 
$handle = fopen($filename, "rb"); 
$contents = fread($handle, filesize($filename)); 
fclose($handle); 
$array = explode('[separator]', $contents); 

foreach ($array as $line) 
{ 
    mysql_query("INSERT INTO table VALUES (".mysql_real_escape_string($line).")", $mysql); 
} 
mysql_close($mysql);

另一种解决方案报价，但日本央行的解决方案是比这更好的。

来源

2011-07-31 22:19:55

这取决于您在机器上有多少内存。如果您不受RAM大小的限制，您可以尝试读取整个文件，将其分解为数组并一次性生成插入查询。

你可能会需要生成，因为DB限制的多重插入查询（例如，在MySQL的max_allowed_packet）

如果你没有足够的可用内存，你需要阅读更多步骤的文件（由大块字节）。你可以在生成一些多重插入查询之后。

fopen和fread功能可能会有所帮助。

来源

2011-07-31 22:36:51

如何将大的.txt文件传输到MySQL？

回答

相关问题