在我的情况下并行运行数据导入

Question

我正在开发一个 Rails v2.3 应用。并使用 MySQL v5.1 作为我的数据库。

目前，在我的 Rails 应用程序中，我有一个 rake 任务（从 Helper 调用方法）用于执行多个 .sql 转储文件以从中导入数据模板数据库到我的development database。例如execute_dump("fill_all_tables.sql")。

.sql 文件如下所示：

TRUNCTE TABLE cars;
ALTER TABLE DISABLE KEYS
INSERT INTO cars (col1,col2,col3,...) VALUES SELECT (...) FROM template_db.cars WHERE...
ALTER TABLE ENABLE KEYS
OPTIMIZE TABLE

然后，我有一个 2nd rake 任务，它将运行一个脚本来创建一个新的（第 3 个）数据库，同时从同一个 模板数据库 导入数据但放入数据到新创建的3rd database。

因此，两个 rake 任务（或方法）都从同一个 模板数据库 导入数据，但放在 不同的数据库。 （一个用于开发数据库，​​另一个用于第三个数据库）。

我想让上述数据导入的事情并行发生。如何在 Rails 中实现？

附言

我的development database 和3rd database 在数据导入开始之前创建了相同的表。而且我的第一个 rake 任务会在数据导入后做更多的事情。

Answer 1

如果您希望简单地执行此操作，请尝试使用 UNIX shell 而不是 Ruby。这样，您就不会乱用纤维、分叉和线程。创建两个填充目标数据库的 rake 任务，并将以下代码放入名为 db_load.sh 的文件中：

     #!/bin/sh
     echo "preparing db"
     rake my_project:prepare_database

     echo "starting: copy of template to database 2"
     rake my_project:copy_from_template_database_to_database_2 &

     echo "starting: copy of template to database 3"
     rake my_project:copy_from_template_database_to_database_3 &

最后两行末尾的 & 号告诉 shell 以非阻塞方式运行这些任务。它们将并行运行。 （当然，更改 rake 任务的名称以适合您的项目。）

要运行此脚本，请输入 chmod +x db_load.sh 使其可执行，然后输入：

     ./db_load.sh

或者，你可以在你的 rake 任务中使用反引号来完成同样的事情：

    puts "starting: copy of template to database 2"
    `rake my_project:copy_from_template_database_to_database_2 &`

    puts "starting: copy of template to database 3"
    `rake my_project:copy_from_template_database_to_database_3 &`