【问题标题】:Jupyter Notebook: (OperationalError('disk I/O error',))Jupyter Notebook: (OperationalError('disk I/O error',))
【发布时间】:2018-03-08 14:22:07
【问题描述】:

我在运行现有的 Jupyter Notebook 文件时遇到以下错误

The history saving thread hit an unexpected error (OperationalError('disk I/O error',)).History will not be written to the database.

不管怎样,notebook 中的剩余代码在此之后都能正常执行。但是,当我尝试创建一个新的笔记本文件时,此错误不允许我创建它,我收到以下错误:

Error while saving file: python_notebook_ollie/Untitled2.ipynb disk I/O error
Traceback (most recent call last):
  File "/work/ollie/muali/miniconda3/lib/python3.6/site-packages/notebook/services/contents/filemanager.py", line 421, in save
    self.check_and_sign(nb, path)
  File "/work/ollie/muali/miniconda3/lib/python3.6/site-packages/notebook/services/contents/manager.py", line 440, in check_and_sign
    self.notary.sign(nb)
  File "/work/ollie/muali/miniconda3/lib/python3.6/site-packages/nbformat/sign.py", line 449, in sign
    self.store.store_signature(signature, self.algorithm)
  File "/work/ollie/muali/miniconda3/lib/python3.6/site-packages/nbformat/sign.py", line 207, in store_signature
    if not self.check_signature(digest, algorithm):
  File "/work/ollie/muali/miniconda3/lib/python3.6/site-packages/nbformat/sign.py", line 241, in check_signature
    self.db.commit()
sqlite3.OperationalError: disk I/O error
[W 15:08:48.093 NotebookApp] Unexpected error while saving file: python_notebook_ollie/Untitled2.ipynb disk I/O error
[E 15:08:48.094 NotebookApp] {
  "Host": "localhost:15695",
  "User-Agent": "Mozilla/5.0 (X11; Ubuntu; Linux x86_64; rv:58.0) Gecko/20100101 Firefox/58.0",
  "Accept": "application/json, text/javascript, */*; q=0.01",
  "Accept-Language": "en-US,en;q=0.5",
  "Accept-Encoding": "gzip, deflate",
  "Referer": "http://localhost:15695/notebooks/python_notebook_ollie/Traj_case_study.ipynb",
  "Content-Type": "application/json",
  "X-Xsrftoken": "2|96ae1fed|bde68f8333dd4b46b900b02246747fa4|1520496687",
  "X-Requested-With": "XMLHttpRequest",
  "Content-Length": "19",
  "Cookie": "_xsrf=2|96ae1fed|bde68f8333dd4b46b900b02246747fa4|1520496687; username-localhost-15695=\"2|1:0|10:1520518043|24:username-localhost-15695|44:NjE5MWZlMWIzMjdmNGE2N2FlZmQ3NmE3NzRlNmNiZmQ=|8062f4c541e5dcef0d8b4a2d7e75cc59f1d27197ac4633b9da64b7bb94aae7a4\"",
  "Connection": "keep-alive"
}  

我尝试关注answer 并删除了 history.sqlite 文件,但我仍然收到磁盘 I/O 错误。

github 上的一些线程说基于 NFS 的挂载可能会产生一些问题,但过去它工作正常直到我升级了我的 matplotlib 包。我现在已经降级了那个包,但我仍然不能摆脱错误。

编辑:打开 .ipynb 文件时终端上显示的第一个错误是

The signatures database cannot be opened; maybe it is corrupted or  

encrypted. You may need to rerun your notebooks to ensure that they are trusted to run Javascript. The old signatures database has been renamed to ~/.local/share/jupyter/nbsignatures.db.bak and a new one has been created.

【问题讨论】:

  • 我发现this link 与错误有关。可能发生错误是因为 sqlite 锁定在基于 NFS 的系统上无法正常工作。而且,我想触发器是当我试图通过我的电脑创建一个隧道时,同一个笔记本文件在两台机器上运行?我仍然不明白如何摆脱这个问题

标签: python jupyter-notebook


【解决方案1】:

我能够让它工作,所以我会发布我所做的。 我认为问题的原因是 SQLite 锁定在 NFS 文件系统上不能可靠地工作,如link 中所述。

那里也给出了答案,我会在这里更详细地写下步骤:

基本上,必须为 ipython 创建新配置或修改现有配置。名为 ipython_config.py 的配置文件可以在 ~/.ipython/profile_default 中找到

如果默认情况下配置文件不存在,则可以通过在主目录中键入以下内容来创建它

ipython profile create 

这将在 ~/.ipython/profile_default 下创建配置文件。 打开 ipython_config.py 并添加以下行:

c = get_config() #gets the configuration
c.HistoryManager.hist_file='/tmp/ipython_hist.sqlite' #changes history file writing to tmp folder

保存并重新打开内核,它现在应该可以工作了。更多修改配置详情请见here

如果配置文件已经存在,那么只需在终端输入

ipython --HistoryManager.hist_file='/tmp/ipython_hist.sqlite'

这也应该有效。

【讨论】:

    【解决方案2】:

    我按照上述步骤操作,但不确定出了什么问题,但它完全破坏了 Jupyter 实验室(print("hello") 需要大约 30 秒来渲染)。

    就我而言,我认为最初的问题是由于历史记录已损坏(~/.ipython/profile_default/ 有一个名为history-corrupt-* 的文件,带有今天的时间戳)。根据 Ankit 的回答 here,我通过删除 ~/.ipython/profile_default/history.sqlite 来清除历史记录,从而解决了问题。

    注意:我还删除了在上述过程中创建的config 文件。

    【讨论】:

      【解决方案3】:

      检查您的家庭磁盘配额,可能已满。

      对我来说,我在家庭配额有限的服务器上运行 jupyter。并且发现随着每天使用 pip,~/.cache/pip 变得非常大。也许我没有空间可以写入我的主目录。

      所以我删除~/.cache/pip,然后重启jupyter。一切正常

      【讨论】:

        猜你喜欢
        • 1970-01-01
        • 2020-12-03
        • 2014-09-03
        • 2020-08-17
        • 1970-01-01
        • 2016-06-02
        • 2021-09-24
        • 1970-01-01
        • 1970-01-01
        相关资源
        最近更新 更多