识别仅包含单个值的所有列（例如 0,0.00、Z、Y、N）

Question

我找到了识别具有重复值的列的方法，并且我可以使用 Select Distinct 来查找只有一个值的列，但是我有很多包含数百列甚至数百万行的表。我需要找到该列仅包含 0、0.00、Z、N 或 Y 的每个列名。本质上是试图创建一个无用列的列表。

如何在每一列、一次一列中迭代 select distinct（或沿着这些线的东西），并在表中识别每行中的列值都相同的那些实例？或者，行数小于 2 的实例。

这似乎有点接近，但指定值无济于事： SQL Server SELECT where any column contains 'x'

分组并拥有 > 1 种作品，但我必须为每一列运行它。

Select Distinct 有效，但我必须一次运行一列，除非我缺少更好的方法。

我有一些方法可以合作，但仅限于数字列：Find columns that contain only zeros

这可以识别仅包含 NULL 的列，但我似乎无法让它对任何其他值起作用：

DECLARE crs CURSOR LOCAL FAST_FORWARD FOR SELECT name FROM syscolumns WHERE id=OBJECT_ID('TABLENAME')
OPEN crs
DECLARE @name sysname
FETCH NEXT FROM crs INTO @name
WHILE @@FETCH_STATUS = 0
BEGIN
    EXEC('SELECT ''' + @name + ''' WHERE NOT EXISTS (SELECT * FROM TABLENAME WHERE ' + @name + ' IS NOT NULL)')
    FETCH NEXT FROM crs INTO @name
END
CLOSE crs
DEALLOCATE crs

我已经开始适应了一点，但在 from:

附近遇到了关于不正确语法的错误

DECLARE crs CURSOR LOCAL FAST_FORWARD FOR SELECT name FROM syscolumns WHERE id=OBJECT_ID('TABLENAME')
DECLARE @sql NVARCHAR(MAX)
OPEN crs
DECLARE @name sysname
FETCH NEXT FROM crs INTO @name
WHILE @@FETCH_STATUS = 0
BEGIN
Create Table #Temp (ID NVARCHAR, Info INT)
SET @sql = N'select distinct ''' + @name + ''' insert into #Temp (ID) from TABLENAME; SELECT COUNT(*) from #Temp Having COUNT(*)<2 insert into  #Temp (Info);' 
EXEC sp_executesql @sql 
DROP TABLE #Temp
FETCH NEXT FROM crs INTO @name
END
CLOSE crs
DEALLOCATE crs

Answer 1

这是您可以解决此问题的一种方法。对于指定表的每一列，它会计算符合您的条件的行数，如果该列的行数与表的行数匹配，则将该列添加到 XML 列表中以供审核。

注意：

鉴于您的列数和可能的行数，此过程可能需要一段时间。

DECLARE @Columns table ( column_name varchar(255), pk INT IDENTITY(1,1) );
DECLARE 
    @TableName varchar(50) = 'tblClients',
    @Criteria varchar(255) = 'IN (''0'', ''0.00'', ''Z'', ''N'', ''Y'')',
    @sql nvarchar(MAX),
    @rows int;

/* Get the current row count for @TableName */

SET @sql = 'SELECT @count = COUNT( DISTINCT [' + @col + '] ) FROM ' + @TableName + ';';
    EXEC sp_executesql @sql, N'@count int OUT', @count = @rows OUT;

/* Create an XML object to store fields that match criteria */
DECLARE @List xml = '<root><columns></columns></root>';

    -- Insert the table name and number of rows processed.
    SET @List.modify( 
      'insert
        <table>
          <name>{sql:variable("@TableName")}</name>
          <rows>{sql:variable("@rows")}</rows>
          <criteria>{sql:variable("@Criteria")}</criteria>
        </table>
      as first
      into (//root)[1]' 
    );

/* Collect a list of column names for the specified table */

INSERT INTO @Columns ( column_name )
SELECT [name] FROM sys.columns WHERE object_id = OBJECT_ID( @TableName ) ORDER BY column_id;

/* For-each column, check if it contains: [ 0 | 0.00 | Z | N | Y ] */

DECLARE @pk int = 1, @col varchar(255), @count int;
WHILE @pk <= ( SELECT MAX ( pk ) FROM @Columns ) 
BEGIN

    -- Current column.
    SELECT @col = column_name FROM @Columns WHERE pk = @pk;
    
    -- Get count of rows for this column with the specified values.
    SET @sql = 'SELECT @count = COUNT( DISTINCT [' + @col + '] ) FROM ' + @TableName + ' WITH (NOLOCK) WHERE CAST( [' + @col + '] AS varchar(MAX) ) ' + @Criteria + ';';
        EXEC sp_executesql @sql, N'@count int OUT', @count = @count OUT;

    -- Insert the column for review if its count matches the table row count.
    IF @count BETWEEN 1 AND 2
        SET @List.modify(
          'insert 
            <column>
              <name>{sql:variable("@col")}</name>
              <count>{sql:variable("@count")}</count>
            </column> 
          into (//root/columns)[1]'
        );

    -- Next column.
    SET @pk = @pk + 1;

END

/* SELECT @List results */
SELECT @List AS List;

在我的例子中，返回以下 XML。这些列符合您的审核标准。

<root>
  <table>
    <name>tblClients</name>
    <rows>143</rows>
    <criteria>IN ('0', '0.00', 'Z', 'N', 'Y')</criteria>
  </table>
  <columns>
    <column>
      <name>WebPortal</name>
      <count>143</count>
    </column>
    <column>
      <name>EnforceQTY</name>
      <count>143</count>
    </column>
    <column>
      <name>CheckForPrepaid</name>
      <count>143</count>
    </column>
    <column>
      <name>ReportNet</name>
      <count>143</count>
    </column>
    <column>
      <name>ActiveClient</name>
      <count>143</count>
    </column>
  </columns>
</root>

Answer 2

假设这是一次性的，构建一个像这样的临时查询可能更容易和更快

SELECT
  SUM(CASE WHEN Col1 NOT IN ('0.00', 'Z', 'N', 'Y') THEN 1 ELSE 0 END) AS Col1,
  SUM(CASE WHEN Col2 NOT IN ('0.00', 'Z', 'N', 'Y') THEN 1 ELSE 0 END) AS Col2,
  SUM(CASE WHEN Col3 NOT IN ('0.00', 'Z', 'N', 'Y') THEN 1 ELSE 0 END) AS Col3
FROM
yourtable

总数 >= 1 的任何列都有有用的数据。

注意事项

• 以上内容是一个隐式分组，因为它实际上并未对任何字段进行分组。
• 以上假设所有列都是字符串（例如，varchar/nvarchar）。如果有混合，您需要按列调整它
• NULL 也不算作有效值（例如，不要在总数中加 1）

要在 SSMS 中获取您的列列表，您可以这样做

• 为表格编写脚本（右键单击表格 -> 将表格编写为 -> 创建表格），或者
• 只需打开左侧的表格，右侧的新查询窗口，然后将“列”一词拖到右侧

然后，只需使用您喜欢的文本编辑器或类似工具，使用上面的模板创建您的 SQL - 将 Col1、Col2 等替换为实际的列名。如果您有字符串和数字类型的混合，第一个选项可用于将它们组合在一起以构造“IN”表达式。