如何使用具有最大吞吐量的Azure存储

问题描述

我的文件存储中包含大量文件。当我为它运行脚本（例如，对每个嵌套目录中的文件进行计数的脚本）时，可能要花费超过12小时的时间。

我使用nodejs和for(dir of dirs) {}，所以它顺序检查每个目录。当我将其更改为等待Promise.all(dirs.map(async dir => {}))时，出现错误“服务器正忙”。

有人有好的解决方案吗？或者也许是一个很好的用于天蓝色存储的库包装程序？

更新：

我开始做什么：

async listFilesAndDirectories(directory) {
    while (this.isSleep) {
      await sleep(50)
    }
    while (this.counter > 50) {
      this.isSleep = true
      await sleep(1000)
      this.isSleep = false
      this.counter = 0
    }
    this.counter++
    const p = new Promise((resolve,reject) => {
      this.fileService.listFilesAndDirectoriesSegmented(
        this.shareName,directory,CURRENT_TOKEN,function(error,result,response) {
          if (!error) {
            resolve(result)
          } else {
            reject(error)
          }
        }
      )
    })
    const result = await p
    return result.entries
  }

但是50个请求太少了。微软在Doc中表示，它们的吞吐量为1000或10000 op / sec。

解决方法

暂无找到可以解决该程序问题的有效方法，小编努力寻找整理中！

如果你已经找到好的解决方法，欢迎将解决方案带上本链接一起发送给小编。

小编邮箱:dio#foxmail.com (将#修改为@）

azure azure azure-storage