標簽[amazon-s3-bucket] - 堆棧內存溢出

[英]Retrieving last modified file from a subdirectory in AWS s3 using Python

我試圖從 s3 存儲桶中獲取最后修改的文件。我嘗試了不同的方法來檢索它。但它總是向我顯示目錄中的所有文件。有人可以請教嗎？我得到的 output 是我只需要最后一個文件“2022-01-24 17:40:24+00:00” ...

[英]AWS S3 ListBuckets operation: Access Denied

我正在嘗試按照boto3 文檔列出存儲桶。但事實證明有一個錯誤，它說ClientError: An error occurred (AccessDenied) when calling the ListBuckets operation: Access Denied 我為這個錯誤找到了一些類似的帖 ...

使用包含用戶詳細信息（例如名稱）的標題重命名 s3 存儲桶文件

[英]rename s3 bucket files with title that has user details such as name

我需要重命名 s3 存儲桶中的文件，並且想知道是否有辦法通過以某種方式查詢 SQL 腳本來重命名文件，以便它可以返回信息並使用它來更新文件的名稱。我很可能需要使用 CLI，因為有很多文件並且手動重命名它們似乎不合理。這是可能的還是有其他方法？ ...

每天將新文件從亞馬遜 S3 存儲桶加載到雪花表

[英]LOAD A NEW FILE EVERYDAY FROM AMAZON S3 BUCKET TO SNOWFLAKE TABLE

我的 Amazon S3 路徑如下：s3://dev-mx-allocation-storage/ph_test_late_waiver/{year}/{month}/{day}/{flow_number}*.csv 我需要創建一個從 S3 到雪花的管道，其中每個月的每一天都會有一個新的 csv 文 ...

如果我們更改 S3 存儲 class，對 AWS Athena 有什么影響嗎？

[英]Will there be any impact in AWS Athena, if we change the S3 Storage class?

在我們的組織中，由於 S3 存儲桶過載，我們面臨成本問題。存儲了太多垃圾文件和檔案，導致此問題。我最近獲准在 AWS S3 中研究生命周期策略。在開始處理此問題之前，我需要澄清一下，我們的 Athena 數據庫將其存儲在其中一個 S3 存儲桶中。如果我們更改存儲 class，這會影響 At ...

Terraform & S3 生命周期：如何使特定對象過期？

[英]Terraform & S3 lifecycle: How to expire specific objects?

我正在編寫這個 S3 存儲桶生命周期規則：下面提供了存儲桶的 ASCII 模擬圖：日志每天在此存儲桶中動態寫入。有些在文件夾logs/中，有些在子文件夾failed_logs/中，有些在存儲桶的根文件夾中。我的目標是在 365 天后使log/文件夾（及其子文件夾failed_logs ）中 ...

如何使用 spring 應用程序檢查亞馬遜 s3 存儲桶的總大小和剩余大小？

[英]How to check total and remaining size of amazon s3 bucket using spring application?

我正在開發一個彈簧應用程序。我需要檢查我的亞馬遜 s3 存儲桶的總大小和當前大小。如何在 spring 應用程序中檢查它？提前致謝。 ...

將圖像從 AWS 存儲桶上傳到 FPDF 對象

[英]Upload image from AWS bucket to FPDF object

我有這樣的 FPDF 對象：我嘗試以這種方式將 .png 文件從 AWS S3 存儲桶直接上傳到pdf ：不幸的是，我得到了一個錯誤：如何確保存儲桶內 .png 文件的路徑正確？或者也許有另一種方法可以將 .png 文件從 S3 存儲桶上傳到 FPDF 對象？感謝您的任何想法 ...

使用 Python 將 FPDF 對象上傳到 AWS S3

[英]Upload FPDF object to AWS S3 in Python

我有如下 FPDF 對象：我嘗試將此 FPDF 對象保存到 AWS 內的 S3 存儲桶中。我在 EMR 上使用 jupyter notebook。當我運行這個：我有錯誤：你知道怎么處理嗎？感謝您的任何想法。 ...

在 S3 中保留元數據究竟是什么意思？

[英]What is exactly mean by retaining metadata in S3?

在研究 S3 單區域復制時，我遇到了在保留對象元數據的同時復制這一點。有人可以解釋元數據保留的確切含義以及它是如何工作的嗎？ ...

在不同賬戶中執行 Athena 查詢后無法查看 S3 存儲桶中的結果？

[英]Unable to view results in S3 bucket after executing Athena query in different account?

我有兩個賬戶：賬戶 A 和賬戶 B。我正在賬戶 A 中執行 Athena 查詢，並希望將查詢結果填充到賬戶 B 的 S3 存儲桶中。我已經在單個帳戶中測試了無數次執行此操作的腳本，因此知道我的代碼沒有問題。 Athena中的查詢歷史也表明我的代碼運行成功，所以肯定是權限問題。我可以在帳 ...

如何使用 C#/.Net 從 AWS S3 下載文件列表到我的設備？

[英]How to download a list of files from AWS S3 with C# / .Net to my device?

我希望下載存儲在 S3 中的多個圖像。但是現在，如果我只能下載一個就足夠了。我有對象路徑的信息。當我運行以下代碼時，出現此錯誤：遇到錯誤***。消息：讀取對象時“拒絕訪問”... 我首先根據我的密鑰和訪問配置創建一個AmazonS3Client對象以連接到服務器，然后根據我的對 ...

多個微服務試圖創建亞馬遜存儲桶

[英]Multiple microservice trying to create amazonaws bucket

我正在嘗試使用 AmazonS3Client Class (com.amazonaws) 的 createBucket(String bucketName) 方法創建 S3 存儲桶，但在此處提供的文檔中https://docs.aws.amazon.com/AWSJavaSDK/latest/jav ...

除了為 Amazon Transcribe 使用 Amazon s3 存儲之外，還有其他方法嗎？

[英]Is there another way around than using Amazon s3 storage for Amazon Transcribe?

我需要為我的一個應用程序將一系列視頻轉錄為文本。有什么方法可以使用本地存儲在 Amazon transcribe 中進行轉錄作業？ ...

嘗試將實時 Kafka 消息攝取到 S3 存儲桶中

[英]Trying to ingest real time Kafka messages into the S3 Bucket

我已經設置了我的 Kafka S3 配置，但是我試圖在生成消息時將實時消息消耗到 S3 存儲桶中。到目前為止，當我在 pod 內進行 go 並進行測試時，只輸入了我測試的消息。但是，我正在嘗試攝取 Kafka 處理器端產生的所有消息我用這個命令運行我的部署文件 ...

為什么從 S3 存儲桶 url 獲取時出現錯誤？

[英]Why i am getting an error when fetching from S3 Bucket url?

我嘗試將圖像上傳到 s3 存儲桶上，圖像已成功上傳，但是當我獲取 URL 時，它顯示“拒絕訪問”。 *PS：我沒有勾選限制公共訪問 ...

com.amazonaws.services.s3.model.AmazonS3Exception：使用有效憑證拒絕訪問

[英]com.amazonaws.services.s3.model.AmazonS3Exception: Access Denied with valid was credentials

我正在嘗試獲取我的 S3Client 中的存儲桶列表，但我收到異常為 com.amazonaws.services.s3.model.AmazonS3Exception：訪問被拒絕（服務：Amazon S3；狀態代碼：403；錯誤代碼：AccessDenied :xxxxxxxxx; S3 擴展請求 ...

我可以控制彈性豆莖使用的桶嗎？

[英]Can I control the bucket that is used by elastic beanstalk?

我使用 JDK API 部署到彈性 beantalk。我想更改彈性 beanstalk 在帳戶級別使用的存儲桶（用於上傳的版本、日志等） - 這可能嗎？我想控制彈性 beanstalk API 生成的存儲桶的名稱，或者告訴它使用我之前創建的存儲桶。編輯：我問這個的原因之一是我沒有意 ...