用于将大量数据加载到MySQL中,LOAD DATA INFILE是迄今为止最快的选择。不幸的是,虽然这可以以 INSERT IGNORE 或 REPLACE 的方式使用,但目前不支持 ON DUPLICATE KEY UPDATE。
但是,ON DUPLICATE KEY UPDATE
比 REPLACE
具有优势。当存在重复项时,后者会执行删除和插入操作。这给 key 管理带来了开销。此外,自动增量 ID 在替换时不会保持不变。
使用 LOAD DATA INFILE 时如何模拟ON DUPLICATE KEY UPDATE
?
最佳答案
这些步骤可用于模拟此功能:
创建一个新的临时表。
CREATE TEMPORARY TABLE temporary_table LIKE target_table;
(可选)从临时表中删除所有索引以加快速度。
SHOW INDEX FROM temporary_table; DROP INDEX `PRIMARY` ON temporary_table; DROP INDEX `some_other_index` ON temporary_table;
将 CSV 加载到临时表中
LOAD DATA INFILE 'your_file.csv' INTO TABLE temporary_table FIELDS TERMINATED BY ',' OPTIONALLY ENCLOSED BY '"' (field1, field2);
使用 ON DUPLICATE KEY UPDATE 复制数据
SHOW COLUMNS FROM target_table; INSERT INTO target_table SELECT * FROM temporary_table ON DUPLICATE KEY UPDATE field1 = VALUES(field1), field2 = VALUES(field2);
删除临时表
DROP TEMPORARY TABLE temporary_table;
使用SHOW INDEX FROM
和SHOW COLUMNS FROM
可以针对任何给定表自动执行此过程。
关于MySQL LOAD DATA INFILE 并进行重复键更新,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/57062647/