我知道分块上传，我们必须在接收端做些什么吗？

Question

我的 azure 函数接收大型视频文件和图像并将其存储在 Azure blob 中。客户端 API 将数据分块发送到我的 Azure htttp 触发器函数。我是否必须在接收端做一些事情来提高性能，比如分块接收数据？

Bruce，实际上客户端代码正在由其他团队开发。现在我正在通过邮递员对其进行测试并从多部分 http 请求中获取文件。

foreach (HttpContent ctnt in provider.Contents)  {

                var dataStream = await ctnt.ReadAsStreamAsync();
 if (ctnt.Headers.ContentDisposition.Name.Trim().Replace("\"", "") == "file")
               {                
                        byte[] ImageBytes = ReadFully(dataStream);
                        var fileName = WebUtility.UrlDecode(ctnt.Headers.ContentDisposition.FileName);                         

              } }

ReadFully 函数

 public static byte[] ReadFully(Stream input){
using (MemoryStream ms = new MemoryStream())
{
    input.CopyTo(ms);
    return ms.ToArray();
}}

Answer 1

正如BlobRequestOptions.ParallelOperationThread 所述：

获取或设置可以同时上传的块数。

备注：

在 blob 上使用 UploadFrom* 方法时，该 blob 将被分解为块。设置这个 值限制了库正在进行的未完成 I/O“放置块”请求的数量 在给定的时间。默认值为 1（无并行性）。将此值设置得更高可能会导致 更快的 Blob 上传，具体取决于客户端和 Azure 存储服务之间的网络。 如果 blob 很小（小于 256 MB），建议将此值保持为 1。

我假设您可以显式设置 ParallelOperationThreadCount 以加快 Blob 上传速度。

var requestOption = new BlobRequestOptions()
{
    ParallelOperationThreadCount = 5 //Gets or sets the number of blocks that may be simultaneously uploaded.
};

//upload a blob from the local file system
await blockBlob.UploadFromFileAsync("{your-file-path}",null,requestOption,null);

//upload a blob from the stream
await blockBlob.UploadFromStreamAsync({stream-for-upload},null,requestOption,null);

foreach（provider.Contents 中的 HttpContent ctnt）

根据您的代码，我假设您检索 provider 实例如下：

MultipartMemoryStreamProvider provider = await request.Content.ReadAsMultipartAsync();

此时，您可以使用以下代码上传新的 blob：

var blobname = ctnt.Headers.ContentDisposition.FileName.Trim('"');
CloudBlockBlob blockBlob = container.GetBlockBlobReference(blobname);
//set the content-type for the current blob
blockBlob.Properties.ContentType = ctnt.Headers.ContentType.MediaType;
await blockBlob.UploadFromStreamAsync(await ctnt.Content.ReadAsStreamAsync(), null,requestOption,null);

我更喜欢使用MultipartFormDataStreamProvider，它将从客户端上传的文件存储到文件系统而不是MultipartMemoryStreamProvider，后者将使用服务器内存来临时存储从客户端发送的数据。对于 MultipartFormDataStreamProvider 方法，您可以遵循类似的issue。此外，我更喜欢将 Azure 存储客户端库与我的 Azure 功能一起使用，您可以关注 Get started with Azure Blob storage using .NET。

更新：

此外，您可以按照tutorial 将大文件分成小块，将它们上传到客户端，然后将它们合并回您的服务器端。