【问题标题】:Apify - Dataset Not In Same Order As URL ListApify - 数据集与 URL 列表的顺序不同
【发布时间】:2021-02-26 21:09:31
【问题描述】:

我一直在不懈地尝试解决这个问题,但已经没有想法了。为什么 Apify 给我的数据集和 URL requestList 的顺序从来不一样?

{ url: 'https://www.ecstuning.com/Search/SiteSearch/63210301815 '},
{ url: 'https://www.ecstuning.com/Search/SiteSearch/63216935865 '},
{ url: 'https://www.ecstuning.com/Search/SiteSearch/63216935866 '},
{ url: 'https://www.ecstuning.com/Search/SiteSearch/63216935863 '},
{ url: 'https://www.ecstuning.com/Search/SiteSearch/63216935864 '},
{ url: 'https://www.ecstuning.com/Search/SiteSearch/63217160907 '},
{ url: 'https://www.ecstuning.com/Search/SiteSearch/63217160935 '},

返回的数据集倒置,行乱序。这使得无法将其粘贴回我们正在构建的电子表格中。请帮忙!

【问题讨论】:

    标签: jquery url dataset apify


    【解决方案1】:

    Apify 抓取同时运行请求,因此后面的 URL 可以比第一个更早完成。如果这对你来说真的很重要,你可以添加 maxConcurrency: 1 来一一抓取。或者将数据推送到临时数组,然后将该数组立即推送到数据集中。

    【讨论】:

      猜你喜欢
      • 1970-01-01
      • 1970-01-01
      • 2020-01-23
      • 2011-04-06
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2011-10-05
      • 1970-01-01
      相关资源
      最近更新 更多