批量从 SQL Server 检索数据

Question

我有一个 Silverlight Web 应用程序。

我正在将记录插入到从 csv 文件加载的表（SQL 数据库）中。 我尝试加载 +- 15 000 条记录，但出现以下错误： 远程服务器返回错误：NotFound。

我认为这是因为一次插入的数据太多，因为当我将它分成“批次”时，比如一次 100 个，它没有问题地插入到表中。一次500个也太多了。

将数据插入表后，我会从同一个表中读取数据并将其放入数据网格中。这样用户就可以看到它已成功插入，并在处理插入的记录时进行监控。

现在显然我在尝试将 15000 +- 记录加载回数据网格时遇到了同样的错误。

我的问题是如何分批读取表中的记录？

希望有人能提供帮助。

非常感谢，

尼尔

编辑

为了测试我对 OperationContract 进行了更改：

原来

[OperationContract]
public List<send_box> GetSendingItems()
{
    return (from a in smsData.send_boxes
            orderby a.sb_log descending
            select a).ToList();
}

改成

[OperationContract]
public List<send_box> GetSendingItems()
{
    List<send_box> sendBoxList = (from a in smsData.send_boxes
            orderby a.sb_log descending
            select a).ToList();

    return sendBoxList;
}

结果是从数据库返回的，但是当我尝试将它返回给应用程序时： --> 返回发送框列表

然后它抛出“远程服务器返回错误：未找到。”错误。希望这些额外的信息会有所帮助

问候

尼尔

Answer 1

根据您发布的有限错误消息，我不确定这是否是您的确切问题（堆栈跟踪有助于更好地诊断此问题），但我假设您正在使用 WCF 服务将数据传递给数据库并返回，并且该服务设置了最大消息大小，您需要增加该最大消息大小以允许传递更大量的数据。这是一篇讨论这个的文章wcf-how-to-increase-message-size-quota

Answer 2

我不确定您的确切业务需求是什么。但是根据您的一个回复，您说用户 wnats 可以查看所有记录。如果所有 15,000 条记录都失败，我不确定用户能做什么。可能最好显示一种总结，比如说 15000、10000 通过和 5000 失败。并提供向下钻取或导航链接以探索成功或失败记录。

其次，即使用户想要查看所有记录，我认为在网格中显示超过 100 条记录对用户来说并不友好。 100对我来说也太高了。您可以实现分页功能来限制网格中显示的记录数。

Answer 3

这看起来像是使用SqlBulkCopy 之类的批量插入机制执行的工作（工作流程：将 csv 文件传输到服务器，建立数据表或其他东西并一次性插入）。无论如何，使用批处理是一个好主意，例如一次 1000 个项目应该不是问题。

旁注：你到底为什么要在一个网格中显示 15000 条记录？没有意义...例如不是更好吗？显示最后插入的 10 条记录以及总数？