it-swarm.com.ru

Как рекурсивно загрузить список файлов BLOB-объектов Azure?

Файлы BLOB-объектов Azure хранятся в виде простого списка без какой-либо физической структуры папок, но мы можем создавать виртуальные папки, в которых путь к папке каждого файла является частью его имени.

Выявляется еще одна проблема: как получить список ВСЕХ файлов в виртуальной подпапке, используя только имя этой папки?

10
mik-t

На самом деле, есть более простой способ сделать это, и он доступен в самой библиотеке. Если вы посмотрите на метод CloudBlobContainer.ListBlobs , он принимает два параметра:

  1. prefix: это имя вашего каталога. Если это вложенный каталог, вам нужно будет указать полный путь, например, моя_папка/mysubfolder.
  2. useFlatBlobListing: установка этого значения в true обеспечит возврат только больших двоичных объектов (в том числе внутри любых подпапок в этом каталоге), а не каталогов и больших двоичных объектов.

        var account = new CloudStorageAccount(new StorageCredentials(accountName, accountKey), true);
        var blobClient = account.CreateCloudBlobClient();
        var container = blobClient.GetContainerReference("blob-container-name");
        var blobs = container.ListBlobs(prefix: "container-directory", useFlatBlobListing: true);
    

Вы получите список всех больших двоичных объектов, находящихся в «контейнере-каталоге» в переменной blobs.

29
Gaurav Mantri

Этот статический класс BlobHelper будет загружать список всех файлов больших двоичных объектов в данной папке больших двоичных объектов и всех его подпапок.

Просто назовите это так:

var blobs = BlobHelper.ListFolderBlobs("blob-container-name", "container-directory");

Вот полный BlobHelper код:

using System;
using System.Collections.Generic;
using System.Diagnostics;
using System.IO;
using System.Linq;
using Microsoft.WindowsAzure;
using Microsoft.WindowsAzure.Storage;
using Microsoft.WindowsAzure.Storage.Blob;

// Class to contain list of blob files info
public class BlobFileInfo {
  public string FileName { get; set; }
  public string BlobPath { get; set; }
  public string BlobFilePath { get; set; }
  public IListBlobItem Blob { get; set; }
}
public static class BlobHelper {
// Load blob container
public static CloudBlobContainer GetBlobContainer(string containerName) {
  var storageAccount = CloudStorageAccount.Parse(CloudConfigurationManager.GetSetting("StorageConnectionString"));
  var blobClient = storageAccount.CreateCloudBlobClient();
  var container = blobClient.GetContainerReference(containerName);
  return container;
}

// Get recursive list of files
public static IEnumerable<BlobFileInfo> ListFolderBlobs(string containerName, string directoryName) {
  var blobContainer = GetBlobContainer(containerName);
  var blobDirectory = blobContainer.GetDirectoryReference(directoryName);
  var blobInfos = new List<BlobFileInfo>();
  var blobs = blobDirectory.ListBlobs().ToList();
  foreach (var blob in blobs) {
    if (blob is CloudBlockBlob) {
      var blobFileName = blob.Uri.Segments.Last().Replace("%20", " ");
      var blobFilePath = blob.Uri.AbsolutePath.Replace(blob.Container.Uri.AbsolutePath + "/", "").Replace("%20", " ");
      var blobPath = blobFilePath.Replace("/" + blobFileName, "");
      blobInfos.Add(new BlobFileInfo {
        FileName = blobFileName,
        BlobPath = blobPath,
        BlobFilePath = blobFilePath,
        Blob = blob
      });
    }
    if (blob is CloudBlobDirectory) {
      var blobDir = blob.Uri.OriginalString.Replace(blob.Container.Uri.OriginalString + "/", "");
      blobDir = blobDir.Remove(blobDir.Length - 1);
      var subBlobs = ListFolderBlobs(containerName, blobDir);
      blobInfos.AddRange(subBlobs);
    }
  }
  return blobInfos;
}
}
11
mik-t

Из ответа Гаурава Мантри, вот простой способ рекурсивного отображения файлов в виде иерархии.

public class UriNode
{
    public Uri ThisUri { get; private set; }

    public IEnumerable<UriNode> Children { get; private set; }

    public UriNode(CloudBlobContainer container, Uri thisUri = null)
    {
        ThisUri = thisUri;

        if (ThisUri == null)
        {
            Children = container.ListBlobs().Select(b => new UriNode(container, b.Uri));
            return;
        }

        if (!new Regex(@"\/$").IsMatch(ThisUri.AbsolutePath)) return;

        var prefix = string.Join("/", ThisUri.Segments.Skip(2).Take(ThisUri.Segments.Length - 2));
        Children = container.ListBlobs(prefix).Select(b => new UriNode(container, b.Uri));
    }
}

использование:

new UriNode(container);
0
Chad Hedgcock