cost 280 ms
在 DynamoDB Streams 和 Kinesis Streams 之间选择用于 IoT 传感器数据 - Choosing between DynamoDB Streams vs. Kinesis Streams for IoT Sensor data

我有 250 个支持 Wifi 的物联网传感器传输重量数据。 每个设备每秒采样一次。 我在选择 AWS DynamoDB Streams 和 AWS Kinesis Streams 之间请求帮助,以实时存储和处理这些数据。 以下是一些额外的要求: 我需要将所有原始数据保存在一个 SQL 可访问的表中 ...

如何在 GlobalWindow 之后正确组合和记录 PCollection? - How combine & log PCollection correctly after GlobalWindow?

我正在运行一个流媒体管道,它应该将来自 PubSub 的网上商店点击流摄取到 BigQuery 中。 Beam with Dataflow runner 应该可以帮助我汇总每个用户的购买事件价值。 我想每 10 个传入事件触发一次聚合。 这应该很简单,但我对 Beam 比较陌生,似乎误解了一些关 ...

如何根据持续时间(例如 1 小时)聚合来自 Kafka 主题的消息? - How is it possible to aggregate messages from Kafka topic based on duration (e.g. 1h)?

我们正在以每秒几百条的速度将消息流式传输到 Kafka 主题。 每条消息都有一个时间戳和一个有效负载。 最终,我们希望根据消息的时间戳将一小时的数据聚合到 parquet 文件中,并将它们上传到便宜的远程存储(对象存储)。 一种天真的方法是让消费者简单地从主题中读取消息并在 memory 中进行聚 ...

创建临时文件时出错(创建客户端/服务器应用程序,客户端使用 DirectSound 从服务器流式传输 WAV 文件) - Error creating temp file (Creating a client/server application that the client streams WAV files from the server using DirectSound )

对于我大学的一个项目,我必须创建一个客户端/服务器应用程序,其中客户端和服务器通过 sockets 进行通信,客户端使用 DirectSound API 从服务器流式传输 WAV 文件当我尝试播放 WAV 文件时出现此错误“创建临时文件时出错” 那是创建临时文件的代码 ...

在浏览器中向/从文件流式传输数据 - Streaming data to/from file in browser

赏金将在 6 天后到期。 此问题的答案有资格获得+50声望赏金。 Alexander Mills正在寻找可靠来源的答案。 浏览器中是否有 API(在 websockets 之外)允许我们从文件到浏览器的 stream 数据? 是这样的: 可能发生的是用户选择本地文件,本地操作系统上的一些进程写入 ...

Dataflow 流式处理管道中的 DoFn 实例过多 - Too many instances of a DoFn in a Dataflow streaming pipeline

我目前正在开发一个与 Cloud SQL 有很多交互的数据流流管道。该管道通过 Google 开发的 Python 连接器与 Cloud SQL 中的 Postgres 实例进行交互。 它通过继承自 DoFn class“CloudSQLDoFn”的 DoFn 函数进行连接,该函数通过 setup( ...

Apache Flink Streaming Job:部署模式 - Apache Flink Streaming Job: deployment patterns

我们想将 Apache Flink 用于流作业——从一个 Kafka 主题读取并写入另一个。 基础设施将部署到 Kube.netes。 我想在任何 PR 合并到master分支时重新启动作业。 因此,我想知道Flink是否保证重新提交作业会从上次处理的消息开始继续数据stream? 因为最重要的工作 ...

在 Beam 管道中组织 ptransform 的正确方法是什么? - What is the correct way to organize the ptransforms in a beam pipeline?

我正在开发一种从 Kafka 读取数据的管道。 源kafka主题流量比较大,每秒插入10k消息,每条消息200kB左右我需要过滤数据以应用我需要的转换,但我确定是否存在我需要应用过滤器和 window 函数的顺序。 会比 或者两种选择的性能相同? 我知道 samza 只是一个 model,它只告诉 ...

Django StreamingHttpResponse 的问题 - Problem with Django StreamingHttpResponse

我遇到 Django 响应 class StreamingHttpResponse 的问题。 当我使用 StreamingHttpResponse 返回生成器作为响应并发出请求时,我例外地逐个检索每个数据块,而不是在生成器循环完成后立即检索完整数据。 我的 Django 查看: 我这样提出请求: 当 ...

用于数据屏蔽/标记化的数据流流模板给出不一致的结果 - Dataflow streaming template for data masking/tokenization giving inconsistent results

Google 提供的 Dataflow Streaming 模板用于使用云 DLP 从云存储到 bigquery 的数据屏蔽/标记化为每个源文件提供不一致的 output。 我们在 GCS 存储桶中有 100 个奇怪的文件,每个文件有 100 万条记录,我们正在调用数据流流模板以使用 DLP 标记 ...

视频流错误的 Gstreamer rtsp 管道 - Gstreamer rtsp pipeline for videostream error

尝试使用 gstreamer 连接到 rtsp 视频流时遇到问题。 视频流源自 IP 摄像头。 在 vlc 和 opencv(没有 gstreamer)中使用相同的 rtsp 地址可以正常工作。 测试时使用此管道: 运行管道时出现此错误: 如果我使用的密码不正确,我也会收到相同的错误消息。 这让我相 ...

是否可以通过这样的 VPS 路由 parsec 游戏 stream 流量 - Is it possible to route parsec game stream traffic through a VPS like this

我想 stream 并通过秒差距或月光与我的朋友玩游戏,但我的上传速度不足以支持 3 个客户端。 由于它是 p2p,客户端共享我的带宽,每个客户端只有 3 兆比特。 遗憾的是,这对于我们想玩的大多数游戏来说还不够。 所以我的问题是可以通过速度更快的服务器路由视频/音频 stream 数据,并为每个客 ...

如何以尽可能低的延迟将计算机桌面的实时 stream 传输到 web 浏览器视频? - How to get a live stream of a computer's desktop to web browser video with the lowest latency possible?

我正在尝试制作一个在您的 web 浏览器中运行的远程桌面协议。 这是我到目前为止为了捕获桌面(在 Windows 上)所拥有的:ffmpeg -f gdigrab -framerate 60 -i desktop -c:v libx264rgb -preset ultrafast -f mp4 o ...

与默认的非 CDN 选项相比,为什么 Azure Media Services Verizon Premium CDN 流媒体端点实际上会产生更多延迟 - Why does the Azure Media Services Verizon Premium CDN Streaming Endpoint actually create more latency when compared to the default non-CDN option

我有一个用例,它需要 1 - 15 人的观看需求。 更接近 1 - 3 人的观看需求。 所以 1 stream 给 1 - 3 个人。 我需要将其向外扩展,同时让多个流同时进行。 我不是 CDN 方面的专家,但我的观察是默认标准 Stream 端点比我设置的高级 Verizon CDN 性能更高。 ...

如何为 Azure 媒体服务直播 stream 事件构建流媒体 URL? rest api 通话中的流媒体定位器路径在哪里? - How to construct a streaming URL for Azure Media Services live stream event? Where is the streaming locator path on the rest api call?

在 rest api 服务或 sdk 中,文档中没有很好地说明如何提出 stream url。 在 Azure 门户中,它会在您创建直播流媒体事件时创建一个直播 output 和一个 stream 定位器。 同样,文档没有解决这个问题。 要使 output 资产中的视频可供客户端播放,您必须创建流 ...

ffmpeg写段后能触发命令吗? - Can I trigger a command after ffmpeg writes a segment?

我正在使用 ffmpeg 从 RTSP(相机)stream 读取并写入段。我这样做的命令是: 它在一定程度上工作得很好。 我的问题是我想在每个片段写完后对它做些什么。 为此,我监视 segmentsN.txt 文件中添加的行; 然后我阅读内容,做一些事情(处理、上传),然后删除我已经处理过的行(这 ...


 
粤ICP备18138465号  © 2020-2024 STACKOOM.COM