Azure 搜索索引器对于大量文档来说太慢了

Question

我有 S1 层，在 blob 存储的单个容器中包含大约 600,000 个文件。我已将索引限制为仅包含 (.doc,.docx,.xls,.xlsx,.ppt,.pptx,.pdf,.txt,.rtf,.htm,.html) 并排除 (.png,. jpeg,.jpg,.gif,.psd,.mp3,.mp4,.wav,.exe,.zip,.dmg,.msi,.mkv,.flv,.ogg,.ogv,.avi,.mov, .wmv）。我还尝试将分区增加到允许的最大值 12，而性能没有显着变化。

以目前的索引速度，我估计需要 30 天才能完成。

我需要更快地对其进行索引。我怎样才能提高这个速度？

谢谢。

Answer 1

您可以通过并行化索引来加快索引速度：将容器中的 blob 拆分为多个文件夹，并创建多个数据源/索引器对，全部写入同一个目标搜索索引。如果您的搜索服务有 N 个搜索单元，则可以同时运行 N 个索引器，从而显着加快索引速度。