最好检查产品是否已导入 MySQL 表？

Question

最好检查一下产品是否已经导入到 MySQL 表中：

1) 每个产品 ID 的每个查询

foreach ($products_to_import_from_xml as $product) {
    $is_exist = $modx->query("SELECT id FROM modx_ms2_products WHERE crm_id={$product['id']} LIMIT 1")->fetch(PDO::FETCH_COLUMN);
    if ($is_exist) continue;
    actually_import_new_product_because_it_not_exist_yet($product);
}

或

2) 使用“... WHERE `id` IN(array, of, all, importing, IDs)”？

$product_ids_to_import = [];
foreach ($products_to_import_from_xml as $product) {
    $product_ids_to_import[] = $product['id'];
}

$existing_products = $modx->query('SELECT crm_id FROM modx_ms2_products WHERE crm_id IN ('.implode(',', $product_ids_to_import).')')->fetchAll(PDO::FETCH_COLUMN);

foreach ($products_to_import_from_xml as $product) {
    $is_exist = in_array($product['id'], $existing_products);
    if ($is_exist) continue;
    actually_import_new_product_because_it_not_exist_yet($product);
}

Answer 1

一般来说，我会推荐 MySQL 中的insert ... on duplicate key syntax。

为此，您需要对 products 表进行唯一（或主键）约束。如果它不存在，则创建它：

create unique index idx_product_id on products(product_id);

然后在你的应用代码的foreach循环中，你可以这样做：

insert into products(product_id, ...)  -- enumerate all target columns here
values(:product_id, ...)               -- enumerate all input parameters here
on duplicate key update set product_id = values(product_id);

当 MySQL 遇到一个已经存在的product_id 时，它会跳过insert 并转到on duplicate key 子句，在那里执行一个虚拟更新（该值实际上并没有重写，因为它是相同的就像表中已经存在的一样）。

请注意，如果您要导入大量数据，则可以考虑其他替代方法，而不是在应用程序端循环并每行执行单独的 insert。对于高性能插入，MySQL recommends the load data infile syntax，根据文档，它的运行速度是单个插入的 20 倍。这需要将您的 XML 数据转换为 CSV 格式，但值得付出努力。