更新 11M 行数据库和 my.cnf 优化

Question

我必须在 PHP 脚本中更新数据库中的 11M 行。

一段时间后，脚本冻结或崩溃。我必须重新启动 EasyPHP 12，然后重新加载它。

我的配置：

• Windows 7 专业版 64 位
• 英特尔酷睿 i7 860 2.8Ghz
• 8G 内存

我的 my.cnf 文件：

port        = 3306
socket      = /tmp/mysql.sock

[mysqld]
port        = 3306
socket      = /tmp/mysql.sock
skip-external-locking
key_buffer_size = 384M
max_allowed_packet = 1M
table_open_cache = 512
sort_buffer_size = 2M
read_buffer_size = 2M
read_rnd_buffer_size = 8M
myisam_sort_buffer_size = 64M
thread_cache_size = 8
query_cache_size = 32M
thread_concurrency = 8
log-bin=mysql-bin
server-id = 1

[mysqldump]
max_allowed_packet = 16M

[mysql]
no-auto-rehash

[myisamchk]
key_buffer_size = 256M
sort_buffer_size = 256M
read_buffer = 2M
write_buffer = 2M

[mysqlhotcopy]
interactive-timeout

这是崩溃的伪代码。

`For i to 100000 { do magic (check content on the web);    UPDATE table;    }`

Answer 1

你必须查看 php.ini，而不是 my.cnf。

我想您正在对单个记录执行一些逻辑并更新该记录，然后更新到下一个记录。在这种情况下，单个记录（或记录子集）的更新不应花费 那么 长。

冻结或崩溃是因为您的脚本达到了内存限制或其执行时间限制。

Answer 2

您可能遇到了执行时间错误。您可以创建一个 shell 脚本并通过命令行运行它。

例如（伪）：

<?php
SELECT * FROM table
LIMIT $x to $y

FOR every result
do some magic, SAVE to record with ID $id

如果您将此文件称为my_update.php，请键入php path/to/my_update.php 运行它，然后观看魔术。 （其中php 是 php 可执行文件）。

聪明点，记录每一个动作！所以当脚本失败时，你有一个很好的线索，不必重新开始！这正是我在查询中添加 LIMIT 的原因，因此它不必缓冲 11M 行，而只需缓冲几行。在第一组行之后，它将简单地转到下一个 LIMIT。有点像分页，但没有视觉输出。

来源：

• http://php.net/manual/en/features.commandline.php

Answer 3

您需要从 php.ini 文件中更改脚本的最大执行时间。