azure - 列出 Azure blob 存储中不同目录的 blob

Question

我们有以下文件夹结构，我们在 Azure 数据湖中存储数据。

我想列出数据目录中存在的所有 blob。 IE。 abc.txt,xyz.txt,lmn.txt,abc1.txt,xyz1.txt,lmn1.txt,abc2.txt,xyz2.txt,lmn2.txt,gh.txt,kim.txt,tae.txt,.. ..

如何获取仅位于数据目录中的所有 blob？

Azure 中的文件夹结构图像:

我想从每个年份和月份文件夹中获取所有用户的数据文件夹中存在的所有 blob。

代码:

using Microsoft.WindowsAzure.Storage;
using Microsoft.WindowsAzure.Storage.Blob;
using System;
using System.Collections.Generic;

namespace DataLake
{
   class Program
    { 
      static void Main(string[] args)
      {
          CloudStorageAccount storageAccount = CloudStorageAccount.Parse("connection string");
        CloudBlobClient blobClient = storageAccount.CreateCloudBlobClient();
        CloudBlobContainer container = blobClient.GetContainerReference("dev");


        List<string> blobnames = new List<string>();

        var allblobs = container.ListBlobs(useFlatBlobListing: true);
        foreach (var b in allblobs)
        {
            //Console.WriteLine("\t" + b.Uri);
            string name = ((CloudBlockBlob)b).Name;
      //      Console.WriteLine(name);
            string[] names = name.Split('/');
            blobnames.Add(names[names.Length - 1]);

        }
        foreach (var data in blobnames)
        {
            Console.WriteLine(data);
        }


    }
}

}

输出:

Answer 1

尝试使用useFlatBlobListing

我在我的系统中测试了尝试使用此代码

  using Microsoft.Azure.Storage;
using Microsoft.Azure.Storage.Blob;
using System;

using System.Collections.Generic;
using System.IO;

namespace BlobList
{
    class Program
    {
        static void Main(string[] args)
        {




            CloudStorageAccount storageAccount = CloudStorageAccount.Parse("Connection String");
            CloudBlobClient blobClient = storageAccount.CreateCloudBlobClient();
            CloudBlobContainer container = blobClient.GetContainerReference("test");


            List<string> blobnames = new List<string>();
            //var allblobs = container.ListBlobs(prefix: "test1/test2", useFlatBlobListing: true);
            var allblobs = container.ListBlobs(useFlatBlobListing: true);
            foreach (var b in allblobs)
            {
                //Console.WriteLine("\t" + b.Uri);
                string name = ((CloudBlockBlob)b).Name;
                Console.WriteLine(name);
                string[] names = name.Split('/');
                blobnames.Add(names[names.Length - 1]);




            }
            foreach (var data in blobnames)
            {
                Console.WriteLine(data);
            }


        }


    }
}

我尝试创建与您相同的文件夹结构

输出