mySQL 将 8000+ 行从一个表传输到另一个 PHP

Question

我正在编写一个脚本，我希望将 8000 多行从一个表传输到另一个数据库中的另一个表，其中包含选定的列。到目前为止，我曾想过使用PDOStatement::fetchAll() 作为$result 数组来获取整个源表的选定列，然后使用PDO::prepare() 方法准备一个mySQL 插入语句作为

INSERT INTO targetTable (targetColumn1,targetColumn2...) VALUES 
(sourceRow1ForColumn1,sourceRow1ForColumn2,..),
(sourceRow2ForColumn1,sourceRow2ForColumn2,..),
(sourceRow3ForColumn1,sourceRow3ForColumn2,...),...

但我认为这不是一种有效的方式，应该有一种最佳方式来做我想做的事。有没有更好的方法可以做我想做的事？

Answer 1

执行此操作的最佳方法是使用 INSERT ... SELECT 语句。

INSERT INTO targetTable (targetColumn1,targetColumn2)
SELECT expr1, expr2 FROM one_table

expr1 和 expr2 表示返回要分别插入到 targetColumn1 和 targetColumn2 列中的值的表达式。

表达式可以是对源表中列名的简单引用。

---

如果表位于同一 MySQL 实例上的不同数据库（模式）中，您可以使用数据库名称来限定表名。 （不合格的表名是指当前数据库中的一个表（即USE mydatabase）。

如果您当前的数据库是目标数据库，请在 FROM 子句中限定名称表

INSERT INTO targetTable (targetColumn1,targetColumn2)
SELECT expr1, expr2 FROM anotherdb.one_table
                         ^^^^^^^^^^

如果当前数据库包含源表，则限定目标表的名称。

或者只是限定两个表名，而当前是什么数据库并不重要。

---

只需以对每个表具有足够权限的用户身份连接到 MySQL。

GRANT SELECT ON anotherdb.one_table TO myuser@'%';
GRANT INSERT ON targetdb.targetTable TO myuser@'%';

---

如果插入尝试在 targetTable 中插入违反唯一约束的行，则 INSERT ... SELECT 会发生与 INSERT ... VALUES 语句相同的事情...该语句将失败。

如果您想忽略有关重复的错误，而只是跳过这些行，请使用 INSERT IGNORE ... SELECT atatement。 （IGNORE 关键字使 MySQL 不会跳过该行，而不是在违反唯一键约束时抛出错误。

或者，您可以编写 SELECT 语句来排除目标表中已存在的行。

Answer 2

如果只做一次，就不需要关心性能了。

把 set_time_limit(0);在 PHP 文件的开头。

然后，连接到您的第一个数据库。从源表中读取数据并存储在数组中。

现在，断开连接并连接到新数据库，并将数组数据插入目标表

为了关心重复键，您可以在查询中使用 INSERT OR UPDATE ON DUPLICATE。

如果您的记录会很大，您可能会遇到内存问题。因此，最好在存储到数组之前获取计数。然后，在循环中执行该过程，并在每个循环结束时，通过 unset() 释放数组。因此，您拆分记录并以适当的方式保持内存使用。