尝试打开非常大的文件时，打开命令出现 Seg 错误

Question

我正在学校参加网络课程，并且是第一次使用 C/GDB。我们的任务是创建一个与客户端浏览器通信的网络服务器。我正在进行中，可以打开文件并将它们发送给客户。一切都很好，直到我打开一个非常大的文件然后我出现了故障。我不是 C/GDB 的专业人士，所以如果这导致我提出愚蠢的问题并且自己无法看到解决方案，我很抱歉，但是当我查看转储的核心时，我看到我的 seg 错误出现在这里：

if (-1 == (openfd = open(path, O_RDONLY)))

具体来说，我们的任务是打开文件并将其发送到客户端浏览器。我的算法是：

1. 打开/错误捕获
2. 将文件读入缓冲区/错误捕获
3. 发送文件

我们还负责确保在发送非常大的文件时服务器不会崩溃。但我的问题似乎在于打开它们。我可以发送我所有的小文件就好了。有问题的文件为 29.5MB。

整个算法是：

ssize_t send_file(int conn, char *path, int len, int blksize, char *mime) {
  int openfd; // File descriptor for file we open at path
  int temp; // Counter for the size of the file that we send
  char buffer[len]; // Buffer to read the file we are opening that is len big

  // Open the file
  if (-1 == (openfd = open(path, O_RDONLY))) {
    send_head(conn, "", 400, strlen(ERROR_400));
    (void) send(conn, ERROR_400, strlen(ERROR_400), 0);
    logwrite(stdout, CANT_OPEN);
    return -1;
  }

  // Read from file
  if (-1 == read(openfd, buffer, len)) {
    send_head(conn, "", 400, strlen(ERROR_400));
    (void) send(conn, ERROR_400, strlen(ERROR_400), 0);
    logwrite(stdout, CANT_OPEN);
    return -1;
  }
  (void) close(openfd);

  // Send the buffer now
  logwrite(stdout, SUC_REQ);
  send_head(conn, mime, 200, len);      
  send(conn, &buffer[0], len, 0);
  return len;
}

我不知道我是 Unix/C 新手是否只是一个事实。对不起，如果是的话。 =(但非常感谢您的帮助。

Answer 1

我可能只是误解了您在问题中的意思，但我觉得我应该指出，一般来说，尝试一次读取整个文件是一个坏主意，以防您处理的只是太大了，您的内存无法处理。

分配一个特定大小的缓冲区更聪明，比如 8192 字节（好吧，这就是我经常做的事情），并且总是尽可能多地读取和发送，直到你读取（ ) 操作为流结束返回 0（并且没有设置 errno）。

Answer 2

我怀疑你有一个 stackoverflow（我应该在这个网站上使用这个词获得奖励积分）。

问题是您一次为堆栈上的整个文件分配缓冲区。对于较大的文件，此缓冲区比堆栈大，下次您尝试调用函数（并因此将一些参数放在堆栈上）时，程序会崩溃。

崩溃出现在打开的行，因为在堆栈上分配缓冲区实际上并没有写入任何内存，它只是更改了堆栈指针。当您调用 open 尝试将参数写入堆栈时，堆栈顶部现在溢出，这会导致崩溃。

解决方案就像 Platinum Azure 或 dreamlax 建议的那样，一次读取文件一点点，或者在堆上分配你的缓冲区将 malloc 或 new。

Answer 3

与其使用可变长度数组，不如尝试使用malloc分配内存。

char *buffer = malloc (len);

...

free (buffer);

我刚刚在我的系统上做了一些简单的测试，当我使用大尺寸的可变长度数组（比如你遇到问题的尺寸）时，我也得到了一个 SEGFAULT。

Answer 4

你在堆栈上分配缓冲区，它太大了。

当您在堆栈上分配存储空间时，编译器所做的只是将堆栈指针减小到足以腾出那么多空间（这使堆栈变量分配保持在恒定时间）。它不会尝试触及任何堆叠的内存。然后，当你调用open()时，它会尝试将参数放入堆栈，发现堆栈溢出并死亡。

您需要对文件进行分块操作、内存映射 (mmap()) 或 malloc() 存储。 此外，path 应声明为 const char*。