web-dev-qa-db-ja.com

ワイルドカードに基づいてオブジェクトがS3バケットに存在するかどうかを判断する

誰かが、特定のファイル/オブジェクトがS3バケットに存在するかどうかを判断する方法を示し、それが存在する場合または存在しない場合にメッセージを表示することはできますか?.

基本的に私はそれをしたい:

1)testbucketなどのS3アカウントのバケットを確認します

2)そのバケット内で、接頭辞がtest_(test_file.txtまたはtest_data.txt)のファイルがあるかどうかを確認します。

3)そのファイルが存在する場合は、ファイルが存在するか、ファイルが存在しないことを示すメッセージボックス(またはコンソールメッセージ)を表示します。

誰か私にこれを行う方法を教えてもらえますか?

39
fraXis

AWSSDK For .Netを使用する私は現在、次の行に沿って何かをしています。

public bool Exists(string fileKey, string bucketName)
{
        try
        {
            response = _s3Client.GetObjectMetadata(new GetObjectMetadataRequest()
               .WithBucketName(bucketName)
               .WithKey(key));

            return true;
        }

        catch (Amazon.S3.AmazonS3Exception ex)
        {
            if (ex.StatusCode == System.Net.HttpStatusCode.NotFound)
                return false;

            //status wasn't not found, so throw the exception
            throw;
        }
}

それはちょっと悪いですが、それは今のところ機能します。

53
Alex

S3FileInfo.Exists メソッドを使用します。

using (var client = Amazon.AWSClientFactory.CreateAmazonS3Client(accessKey, secretKey))
{
    S3FileInfo s3FileInfo = new Amazon.S3.IO.S3FileInfo(client, "your-bucket-name", "your-file-name");
    if (s3FileInfo.Exists)
    {
         // file exists
    }
    else
    {
        // file does not exist
    }   
}
60
Pradeep

これはそれを解決します:

既存のオブジェクトのバケットを一覧表示し、そのようなプレフィックスを使用します。

    var request = new ListObjectsRequest()
        .WithBucketName(_bucketName)
        .WithPrefix(keyPrefix);

    var response = _amazonS3Client.ListObjects(request);

    var exists = response.S3Objects.Count > 0;

    foreach (var obj in response.S3Objects) {
        // act
    }
11
Alvis

私はこの質問が数年前のものであることを知っていますが、新しいSDKはこれを美しく処理します。誰かがまだこれを探しているなら。あなたが探している S3DirectoryInfo クラス

using (IAmazonS3 s3Client = new AmazonS3Client(accessKey, secretKey))
{
    S3DirectoryInfo s3DirectoryInfo = new Amazon.S3.IO.S3DirectoryInfo(s3Client, "testbucket");
    if (s3DirectoryInfo.GetFiles("test*").Any())
    {
        //file exists -- do something
    }
    else
    {
        //file doesn't exist -- do something else
    }
}
11
Robbie Chiha

これが.NET Frameworkに適用されるかどうかはわかりませんが、AWS SDK(v3)の.NET Coreバージョンは非同期リクエストのみをサポートしているため、少し異なるソリューションを使用する必要がありました。

/// <summary>
/// Determines whether a file exists within the specified bucket
/// </summary>
/// <param name="bucket">The name of the bucket to search</param>
/// <param name="filePrefix">Match files that begin with this prefix</param>
/// <returns>True if the file exists</returns>
public async Task<bool> FileExists(string bucket, string filePrefix)
{
    // Set this to your S3 region (of course)
    var region = Amazon.RegionEndpoint.USEast1;

    using (var client = new AmazonS3Client(region))
    {
        var request = new ListObjectsRequest {
            BucketName = bucket,
            Prefix = filePrefix,
            MaxKeys = 1
        };

        var response = await client.ListObjectsAsync(request, CancellationToken.None);

        return response.S3Objects.Any();
    }
}

また、フォルダを検索する場合は、次のようにします。

/// <summary>
/// Determines whether a file exists within the specified folder
/// </summary>
/// <param name="bucket">The name of the bucket to search</param>
/// <param name="folder">The name of the folder to search</param>
/// <param name="filePrefix">Match files that begin with this prefix</param>
/// <returns>True if the file exists</returns>
public async Task<bool> FileExists(string bucket, string folder, string filePrefix)
{
    return await FileExists(bucket, $"{folder}/{filePrefix}");
}

使用法:

var testExists = await FileExists("testBucket", "test_");
// or...
var testExistsInFolder = await FileExists("testBucket", "testFolder/testSubFolder", "test_");
5
2Toad

Amazon S3バージョン3.1.5(.net 3.5)のC#で次のコードを使用して、バケットが存在するかどうかを確認しました。

BasicAWSCredentials credentials = new BasicAWSCredentials("accessKey", "secretKey");

AmazonS3Config configurationAmazon = new AmazonS3Config();
configurationAmazon.RegionEndpoint = S3Region.EU; // or you can use ServiceUrl

AmazonS3Client s3Client = new AmazonS3Client(credentials, configurationAmazon);


S3DirectoryInfo directoryInfo = new S3DirectoryInfo(s3Client, bucketName);
            bucketExists = directoryInfo.Exists;// true if the bucket exists in other case false.

次のコード(Amazon S3バージョン3.1.5 .net 3.5のC#で)を使用しました。ファイルは存在します。

オプション1:

S3FileInfo info = new S3FileInfo(s3Client, "butcketName", "key");
bool fileExists = info.Exists; // true if the key Exists in other case false

オプション2:

ListObjectsRequest request = new ListObjectsRequest();
        try
        {
            request.BucketName = "bucketName";
            request.Prefix = "prefix"; // or part of the key
            request.MaxKeys = 1; // max limit to find objects
            ListObjectsResponse response = s3Client .ListObjects(request);
            return response.S3Objects.Count > 0;
        }

私はC#に詳しくありませんが、Javaからこのメソッドを使用します(c#への変換は即時です):

public boolean exists(AmazonS3 s3, String bucket, String key) {
    ObjectListing list = s3.listObjects(bucket, key);
    return list.getObjectSummaries().size() > 0;
}
1
Monkiki

これを試してください:

    NameValueCollection appConfig = ConfigurationManager.AppSettings;

        AmazonS3 s3Client = AWSClientFactory.CreateAmazonS3Client(
                appConfig["AWSAccessKey"],
                appConfig["AWSSecretKey"],
                Amazon.RegionEndpoint.USEast1
                );

S3DirectoryInfo source = new S3DirectoryInfo(s3Client, "BUCKET_NAME", "Key");
if(source.Exist)
{
   //do ur stuff
}
0
Prasad Shigwan
 s3 = new S3(S3KEY, S3SECRET, false);
 res = s3->getObjectInfo(bucketName, filename);

ファイルが存在する場合は配列を返します

0
Deepika Patel

私はこの質問が数年前のものであることを知っていますが、最近の新しいSDKはこれをより簡単に処理します。

  public async Task<bool> ObjectExistsAsync(string prefix)
  {
     var response = await _amazonS3.GetAllObjectKeysAsync(_awsS3Configuration.BucketName, prefix, null);
     return response.Count > 0;
  }

どこ _amazonS3 あなたの IAmazonS3インスタンスと_awsS3Configuration.BucketNameはバケット名です。

完全なキーをプレフィックスとして使用できます。

0
Razvan Dumitru