按日期时间查询表时提高性能答案

【问题标题】：Improving performance when querying tables by datetime按日期时间查询表时提高性能
【发布时间】：2021-06-13 06:39:42
【问题描述】：

我制作了一个应用程序，在登录和退出另一个应用程序时注册用户。该应用程序基本上将用户 ID、设备、IP 和登录记录为时间戳。

id ????	user ????	device	ip	signed_in	signed_out
1	38	ChromeOS	174.134.24.35	2020-05-01 09:32:01	2020-05-01 18:32:01
2	39	ChromeOS	174.134.24.35	2020-05-01 09:32:01	2020-05-01 18:32:01

我将保存详细信息，只是说这个应用程序的目的是然后汇总用户每个月在另一个应用程序中花费的时间。

获取一个月内所有用户的SQL查询比较简单：

SELECT * 
FROM users
WHERE id = 38 
  AND signed_in >= 2020-05-01 00:00:00
  AND signed_out < 2020-06-01 00:00:00

虽然最初没有任何问题，但据报道，生成总和的速度大幅放缓，随着越来越多的人使用网络服务，该总和已经增长。经过一些干预后，由于时间戳的原因，查询速度大大减慢，因为必须进行全面扫描。

可能的解决方案

我还没有找到任何解决这个性能问题的方法，除了一个：为年月组合添加列，索引它们，并将它们与查询一起使用。

id ????	user ????	device	ip	year ????	month ????	signed_in	signed_out
1	38	ChromeOS	174.134.24.35	2020	5	2020-05-01 09:32:01	2020-05-01 18:32:01
2	39	ChromeOS	174.134.24.35	2020	5	2020-05-01 09:32:01	2020-05-01 18:32:01

SELECT * 
FROM users
WHERE id = 38 
  AND year = 2020
  AND month = 5

这可能是不将解决方案绑定到单个数据库引擎（我正在考虑 MySQL 和 PostgreSQL）的好方法。考虑到数据库越大，数据库扫表的时间越长，这种方法似乎是不可避免的，而索引可以帮助处理每月生成的数千条记录。

除了这个解决方案，我没有想法。

【问题讨论】：

【解决方案1】：

您的“可能的解决方案”可以很好地配合

INDEX(id, year, month)

以任意顺序排列列。如果您有ID...AUTO_INCREMENT 和PRIMARY KEY(id)，那么更好的解决方案是

PRIMARY KEY(id, year, month)

（它本身会丢失对ID 的唯一性检查；但这可能并不重要。它会加快您的查询速度。）

缺点是查询只能用于测试一个月，而不是一周等。

我很困惑。 id 是什么？该表名为users，但您同时拥有id 和user 列。也许表应该被称为logins 并且查询应该有WHERE user=39 AND ...??如果是这样，我将需要重新考虑我的答案。

此外，您说“用户 ID”但显示两列？？

【讨论】：

【解决方案2】：

我假设您的查询最多选择表中 1% 的行。这是索引有效所必需的。

然后，我将您的查询稍微改写为：

SELECT * FROM users
WHERE id = 38 
  AND signed_in between '2020-05-01 00:00:00' AND '2020-05-30 23:59:59'
  AND signed_out < '2020-05-30 23:59:59'

以这种方式改写的查询可以使用索引有效地访问id 和signed_in 的行：

create index ix1 on users (id, signed_in, signed_out);

请注意，我还在索引中添加了signed_out，以用于覆盖范围和避免对索引的双重打击。

另外，我假设列 signed_in 和 signed_out 不是 VARCHAR 而是 DATETIME。

【讨论】：

【解决方案3】：

首先，我将查询写成：

SELECT *
FROM users u
WHERE id = 38 AND
      signed_in >= '2020-05-01' AND
      signed_out < '2020-05-31'

虽然我猜你真的想要：

SELECT *
FROM users u
WHERE id = 38 AND
      signed_in >= '2020-05-01' AND
      signed_out < '2020-06-01'

其中包含仅在 5 月份登录的用户。我希望users(id, signed_in) 或users(id, signed_out) 上的索引就足够了。

【讨论】：