真正的内存问题 - 云函数 [关闭]

Question

基本上尝试做一些日常用户管理工作。用户数据库有几千个用户（30 人左右），但由于大小，功能看起来很困难。

我尽可能地简化了函数，是的，我增加了大小和内存限制（540 秒，2 GB）。

也许我做错了什么愚蠢的错误，也许我需要探索不同的解决方案，例如 Cloud Run 或 App Engine 或更大的解决方案。

module.exports = async (data, context)  => {

  // Get all of the users in the database
  const userQuery = await db.collection('users').get()

  let authPromises = []

  userQuery.forEach(userDoc => {
    
    authPromises.push(
      admin.auth().getUser(userDoc.id).then(userResult => {
        return {
          metadata: userResult.metadata,
          ...userDoc.data().arrayOfKeysIWant
        }
      })
    )    

  })

  let authResult = await Promise.all(authPromises)

  let signInCount = 0
  authResult.forEach(user => {
    if (user.metadata.lastRefreshTime) {
      signInCount += 1
    }
  })

  console.log(signInCount)

  return new Promise((res, rej) => {
    res({count: authResult.length, signInCount})
  })

}

Answer 1

查询所有这些文档并同时将它们全部加载到内存中绝对不能扩展。如果您要单独处理任意大的文档集合，您应该使用pagination 将您的查询分成多个批次。考虑到文档的内容，您应该做一些数学计算，找出适合可用内存的合适页面大小。