做一个更有效的 COUNT

Question

我有一个加载一些高级统计信息的页面。没什么特别的，只有大约 5 个指标。有两个特定的查询需要大约 5 秒才能加载：

+ SELECT COUNT(*) FROM mybooks WHERE book_id IS NOT NULL
+ SELECT COUNT(*) FROM mybooks WHERE is_media = 1

该表有大约 500,000 行。两列都有索引。

这些信息一直在变化，所以我认为这里的缓存不会起作用。使用哪些技术可以加快速度？我在想：

• 创建一个非规范化的stats 表，在更新列时更新该表。
• 通过 ajax 加载慢速查询（这不会加快速度，但可以让页面立即加载）。

这里有什么建议？要求是页面在 1s 内加载完毕。

表结构：

• id（pk，自动递增）
• book_id (bigint)
• is_media（布尔值）

Answer 1

统计数据表可能是最大/最快的收益。假设您完全控制了 MySQL 服务器并且还没有安排作业调度来处理这个问题，您可以使用 mysql 事件调度程序来解决这个问题。正如 Vlad 上面提到的，您的数据会有点过时。这是一个简单的例子：

示例统计表

CREATE TABLE stats(stat VARCHAR(20) PRIMARY KEY, count BIGINT);

初始化你的值

INSERT INTO stats(stat, count)
VALUES('all_books', 0), ('media_books', 0);

创建每 10 分钟更新一次的活动

DELIMITER |

CREATE EVENT IF NOT EXISTS updateBookCountsEvent
ON SCHEDULE EVERY 10 MINUTE STARTS NOW()
COMMENT 'Update book counts every 10 minutes'
DO
BEGIN
    UPDATE stats
    SET count = (SELECT COUNT(*) FROM mybooks)
    WHERE stat = 'all_books';
    UPDATE stats
    SET count = (SELECT COUNT(*) FROM mybooks WHERE is_media = 1)
    WHERE stat = 'media_books';
END |

检查是否执行

SELECT * FROM mysql.event;

没有？检查是否启用了事件调度程序

SELECT @@GLOBAL.event_scheduler;

如果它关闭，您需要在启动时使用参数 --event-scheduler=ON 或在 my.cnf 中设置它来启用它。请参阅此answer 或docs。

Answer 2

您可以采取一些措施来加快查询速度。

1. 在您的 mybooks 表上运行 optimize table

2. 将您的 book_id 列更改为 int unsigned，它允许 42 亿个值并占用 4 个字节而不是 8 个 (bigint)，从而使表和索引更高效。

我也不确定这是否可行，但我不会执行 count(*)，而是选择 where 子句中的列。例如，您的第一个查询是SELECT COUNT(book_id) FROM mybooks WHERE book_id IS NOT NULL