ValidationException - 成員的長度必須小於或等於 500

Question

我的 Snowplow 擴充器將數據加載到 Kinesis 數據流，但 Kinesis 響應錯誤 400，並且消息Member must have length less than or equal to 500 (Service: AmazonKinesis; Status Code: 400; Error Code: ValidationException ，我在AmazonKinesis 文檔。我也不明白消息，500 是什么，字節？當我在 AWS 控制台中查看 Kinesis 時，沒有設置為 500，而且我也沒有看到與最大大小相關的任何內容。

誰能告訴我這500是什么？

Answer 1

該錯誤意味着 Enrich 應用程序試圖一次將 500 多條記錄寫入 Kinesis。 Kinesis API 的PutRequests操作限制為 500 個條目。 這在此處記錄。

在您的豐富配置文件中，您有緩沖區部分，您可以在其中指定：

      byteLimit = 10000000
      recordLimit = 480 
      timeLimit = 60000

當達到這些限制之一時會觸發刷新，以先發生者為准。