【问题标题】:What data type for multiple references?多个引用的数据类型是什么?
【发布时间】:2019-07-05 10:29:18
【问题描述】:

我需要最快的性能方法来检索需要快速提取的整数。这是我的用例:我的网站上有一个“排序/过滤”选项。我有狗的属性,比如长毛、短毛、大号、狗等...我希望用户能够按狗的属性进行过滤。

这是我的桌子:

dogs
- id
- attributes

这里是关于狗的属性的参考(对于这个问题不是很重要,只是给你一个想法):

0 = adoptable pet
1 = short hair
2 = long hair
3 = fluffy
4 = black
5 = brown
6 = white
7 = golden/yellow
8 = etc...

现在,我将属性保存在 JSON 格式的 TEXT 数据类型中。例如,["0","4"]["0"]["2"]

所以我想像这样选择所有属性:

SELECT * FROM dogs WHERE attributes LIKE %0% OR attributes LIKE %1% OR attributes LIKE %4% attributes LIKE %7%

如何选择属性包含 0、1、4 或 7(非与)的所有行。如果一行具有这些属性之一,请选择它们。

最好的方法是什么?我应该在 MySQL 中存储为 JSON 数据类型还是应该做其他事情?我希望能够SELECT 并快速将其拉起。我觉得我拥有它LIKE 的方式不会很快。

最好和最快的方法是什么,尤其是几十万到几百万行?

谢谢你!

【问题讨论】:

  • 只需为 id 列创建一个(主)索引并使用类似WHERE id IN (0,1,4,7)
  • like 是一个通配符搜索,不知道你为什么想要那个。
  • 你用的是什么版本的 MySQL?
  • @Daan 我不是想通过 ID 查找,而是尝试通过属性查找。在attribute 列中,有一个类似["0","4"](在JSON 中)的数据类型,其中的数字是属性的ID。我需要在属性列中搜索属性的 ID
  • 另见我对stackoverflow.com/questions/3653462/… 的回答我认为 JSON 数组与逗号分隔列表具有所有相同的缺点。

标签: php mysql database performance pdo


【解决方案1】:

逗号分隔的列表是一个有问题的反模式。 (Bill Karwin 在他的《SQL AntiPatterns: Avoiding the Pitfalls of Database Programming》一书中做了一个很好的介绍,所以我不打算深入讨论我们为什么要避免这种情况。相反,我将跳入一个经过验证的模式通常用于实现多值属性。)


规范的关系模式将创建一个表,每行都有一个属性。例如这样的:

CREATE TABLE dog_attribute 
( dog_id  int not null comment 'fk ref dog.id'
, attr    int not null comment '1=adoptable, 2=...'
, PRIMARY KEY (dog_id, attr) 
, CONSTRAINT FK_dog_attribute_dog FOREIGN KEY dog_id REFERENCES dog (id)
  ON UPDATE CASCADE ON DELETE CASCADE
, UNIQUE KEY dog_attribute_UX (attr, dog_id)
);

--

要为给定的 dog_id 添加三个属性,我们添加三行:

INSERT INTO dog_attibute (dog_id, attr) VALUES
 (1,2)
,(1,3)
,(1,5)

--

有几种可能的查询模式。举几个简单的例子:

要找到同时具有属性 2 和属性 3 的 dog_id,我们可以这样做:

SELECT da.dog_id 
  FROM dog_attribute da
 WHERE da.attr IN (2,3) 
 GROUP
    BY da.dog_id 
HAVING COUNT(1) = 2 

还有其他查询模式可以提供等效结果,例如

SELECT da.dog_id 
  FROM dog_attribute da
  JOIN dog_attribute dd
    ON dd.dog_id = da.dog_id 
   AND dd.attr = 3
 WHERE da.attr = 2

第一个查询模式可以扩展为找到至少具有两个给定属性集的 dog_id。例如

 WHERE da.attr IN (2,3,5,7)

HAVING COUNT(1) >= 2

第二个查询可以扩展为单个属性添加连接和反连接,

--

要查找具有属性 2 且具有(或两者)属性 3 和 4 且既没有属性 7 也没有属性 8 的行,我们可以这样做:

SELECT da.dog_id 
  FROM dog_attribute da
  LEFT
  JOIN dog_attribute dn 
    ON dn.dog_id = da.dog_id 
   AND dn.attr IN (7,8) 
 WHERE dn.dog_id IS NULL 
   AND da.attr = 2
   AND EXISTS ( SELECT 1 
                  FROM dog_attribute de
                 WHERE de.dog_id = da.dog_id 
                   AND de.attr IN (3,4)
              )

(反加入排除具有属性7的dog_id,...)


如果我无法实现上面演示的表格模式,...如果我绝对必须使用逗号分隔的列表,将多个属性保存在单个列中...对于一个小的静态属性集(定义在表定义,而不是动态添加或删除)我将使用 MySQL SET 数据类型。

https://dev.mysql.com/doc/refman/8.0/en/set.html

 attributes  SET('','adoptable','short hair','long hair','fluffy','black','brown','white','golden')

要查询它,我们可以这样做:

WHERE FIND_IN_SET('black',t.attributes)
  AND FIND_IN_SET('long hair',t.attributes)

【讨论】:

    猜你喜欢
    • 2020-01-19
    • 1970-01-01
    • 2016-04-20
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2010-10-04
    相关资源
    最近更新 更多