IntegrityError 中缺少表名（Django ORM）

Question

我在 Django 的 IntegrityError 中缺少表名：

Traceback (most recent call last):
...
    return self.cursor.execute(sql, params)
  File ".../django/db/utils.py", line 94, in __exit__
    six.reraise(dj_exc_type, dj_exc_value, traceback)
  File ".../django/db/backends/utils.py", line 64, in execute
    return self.cursor.execute(sql, params)
IntegrityError: null value in column "manager_slug" violates not-null constraint
DETAIL:  Failing row contains (17485, null, 2017-10-10 09:32:19, , 306).

有没有办法查看 INSERT/UPDATE 正在访问哪个表？

我们使用 PostgreSQL 9.6。

这是一个通用问题：如何获得更好的错误信息？

这不是关于这个特定专栏的问题。我很快就找到了相关的表格和列。但我想改进来自我们 CI 系统的错误消息。下次我想立即看到表名。

我知道，如果我在软件开发过程中看到此错误，我可以使用调试器轻松揭示缺失的信息。但在我的情况下，这发生在生产中，我只有上面的堆栈跟踪。

Answer 1

我为您的问题找到的最佳解决方案是覆盖 DataBaseErrorWrapper 方法，为此转到 \django\db\utils.py 并在第 86 行替换 dj_exc_value = dj_exc_type(*exc_value.args) 为：

if exec_value.diag:
    a, b = exc_value.args + ("In the table '%s'" % exc_value.diag.table_name,)
    dj_exc_value = dj_exc_type(a + b)
else:
    dj_exc_value = dj_exc_type(*exc_value.args)

如果出现 IntegrityError，则该消息应该有效

django.db.utils.IntegrityError: null value in column "signature" violates not-null constraint
DETAIL:  Failing row contains (89, null).
In the table 'teachers_signature'

我不确定，但这应该适用于这些例外情况：

DataError
OperationalError
IntegrityError
InternalError
ProgrammingError
NotSupportedError

它对我有用，告诉我是否对你有用。请记住使用您正在使用的 Django 文件夹编辑文件

Answer 2

我倾向于使用尽可能少的依赖，并保留 3rd 方库的原样。

大多数时候，我会记录每个 sql 插入/更新/删除查询。通过这种方式，我可以毫不费力地轻松识别出哪个查询出错了。这使我可以在我的系统中跟踪谁在何时做了什么。

这恰好符合我所在行业对行动跟踪的部分监管要求。

Answer 3

此回溯中的异常消息是来自数据库驱动程序的原始消息。如果有任何东西被谷歌搜索、报告等，了解这一点和回溯是很有用的。

所有后端的异常类是相同的 django.db.utils.IntegrityError，但消息或参数取决于后端：

• postgres：null value in column "manager_slug" violates not-null constraint\nDETAILS...\n
• mysql 。 . ：(1048, "Column 'manager_slug' cannot be null")
• sqlite3 。 ：NOT NULL constraint failed: appname_modelname.manager_slug

表名仅在 sqlite3 后端可见。一些后端仅使用异常的字符串参数，但mysql 使用两个参数：数字错误代码和消息。 （我喜欢接受这是一个普遍的问题，不仅是 PostgreSQL。）一些后端的作者希望应用程序的作者直接或从 SQL 中知道表名，但对于一般的 ORM 包来说并非如此。没有更好的和普遍接受的方式，如何扩展消息，即使它可以在技术上完美地完成。

开发调试简单：

• 在开发中的 DEBUG 模式下提供了许多附加信息（最后一帧中的“SQL”或像“myobj.save()”这样的行中的对象的类名）
• python manage.py test --debug-sql: "打印失败时记录的 SQL 查询。"
• 使用 sqlite3 进行开发/测试时的相同错误更易于阅读。

...但您可能要求在生产中出现运行时错误。

我猜你在一个如此笼统的问题中可能的意图是什么方向对你来说可能是有趣的。

A)traceback中最重要的信息通常是高于的几行"... /django/db/...”。对于大师来说，这非常容易。如果代码不像 Django 管理站点那样动态和通用，则很有可能使用它，其中 myobj.save() 调用附近的代码（父框架中都不包含显式模型名称）不包含显式模型名称。示例：

# skip some initial universal code in ".../django/..."
...
# our apps start to be interesting... (maybe other installed app)
...
# START HERE: Open this line in the editor. If the function is universal, jump to the previous.
File ".../me/app/...py", line 47, in my...
  my_obj.save()
# skip many stack frames .../django/db/... below
File ".../django/db/models/base.py", line 734, in save
  # self.save_base(...    # this line 733 is not visible
      force_update=force_update, update_fields=update_fields)
...
# interesting only sql and params, but not visible in production
File ".../django/db/backends/utils.py", line 64, in execute
  return self.cursor.execute(sql, params)
IntegrityError (or DataError similarly)...

B)通过模型的共同祖先获取信息

class ...(models.Model):
    def save(self, *args, **wkargs):
        try:
            super(..., self).save(*args, **wkargs)
        except django.db.utils.IntegrityError as exc:
            new_message = 'table {}'.format(self._meta.db_table)
            exc.extra_info = new_message
            # this is less compatible, but it doesn't require additional reading support
            # exc.args = exc.args + (new_message,)
            reraise

这可能会使多重继承的调试复杂化。

C)在 Django db 中实现会更好，但我无法想象它会被接受并且在某些问题后不会恢复。

Answer 4

我建议使用 Sentry (https://sentry.io/welcome/)。在 Sentry Issues 中，您可以观察堆栈跟踪的所有部分的所有局部变量。

Answer 5

有没有办法查看 INSERT/UPDATE 正在访问哪个表？

如果您正在运行migrate，您只需访问标准输出并检查正在执行的迁移。然后您可以打开迁移文件并更好地了解问题。

如果你不知道，我想你想看看PEP249 以了解可选的错误处理。由于 django 数据库包装器基于 PEP249 规范。

DatabaseErrorWrapper中的django代码参考

第二次编辑：

您可以捕获完整性错误并从数据库包装器访问.messages 属性。

伪例子：

try:
    # operation on database
except IntegrityError as ie:
    print(ie.wrapper.cursor.messages[:])

Answer 6

如果你能创建sql函数你可以试试：

创建函数以获取最后一个序列值 get_sequence_last_value (original post)

CREATE FUNCTION public.get_sequence_last_value(name) RETURNS int4 AS '
DECLARE
ls_sequence ALIAS FOR $1;
lr_record RECORD;
li_return INT4;
BEGIN
FOR lr_record IN EXECUTE ''SELECT last_value FROM '' || ls_sequence LOOP
li_return := lr_record.last_value;
END LOOP;
RETURN li_return;
END;' LANGUAGE 'plpgsql' VOLATILE;

在它获得序列比错误堆栈更多的表之后，并且具有列manager_slug

SELECT table_name, column_name 
FROM information_schema.columns 
WHERE table_name in (
    SELECT table_name

    FROM (
        SELECT table_name,
               get_sequence_last_value(
                    substr(column_default, 10, strpos(column_default, '::regclass') - 11)
                    ) as lv
        FROM information_schema.columns 
        WHERE column_default LIKE 'nextval%'
        ) as t_seq_lv

    WHERE lv > 17485
    )
   AND column_name = 'manager_slug';

我知道解决方案不完整，但我希望它可以帮助你

Answer 7

您错过了“manager_slug”列的设定值。您不能在此列设置 NULL 值。您应该设置值或删除非空条件。

IntegrityError: null value in column "manager_slug" violates not-null constraint