繁体 English 中英

如何在不使用 GCP 的情况下在 Colab 中加载用于 TPU 推理的数据？

[英]How to load data for TPU inference in Colab, without using GCP?

原文 2020-07-29 11:00:46 0 2 tensorflow/ google-colaboratory/ tpu/ google-cloud-tpu

对于 colab TPU 上的训练模型，数据需要位于 GCP 存储桶上。 但是，对于少量数据，我想知道是否可以直接从本地 colab 环境直接推断数据。

2 个解决方案

不幸的是，目前无法使用 Colab 将本地数据加载到 TPU 中。 您将需要继续使用 GCS 存储桶将任何数据加载到 TPU 中。

您可以使用 Python 读取文件：

with open(image_path, "rb") as local_file:
  img = local_file.read()

如何解决 TPU 推理的数据获取瓶颈？

[英]How to solve data fetch bottle neck for TPU inference?

使用 TPU runtime 在 Google Colab 上训练错误 Keras Model

[英]Error Training Keras Model on Google Colab using TPU runtime

如何使用 GCP 负载均衡器将 HTTP 重定向到 HTTPS

[英]How to redirect HTTP to HTTPS using GCP load balancer

如何使用 gcloud sdk 创建没有 default.network 的 gcp 项目

[英]how to create gcp projects without default network using gcloud sdk

无法将数据从 CoLab 加载到 Bigquery

[英]unable to Load data from CoLab to Bigquery

我正在使用 MySQL 的 GCP 数据流到 Bigquery 进行历史数据加载和 CDC/增量加载。我正在获取历史负载但不是增量负载？

[英]I am using GCP datastream for MySQL to Bigquery for historical data load and CDC/incremental load. I am getting historical load but not incremental?

如何从 GCS 将数据加载到 BigQuery（使用 load_table_from_uri 或 load_table_from_dataframe）而不复制 BQ 表中的现有数据

[英]how to load data into BigQuery from GCS (using load_table_from_uri or load_table_from_dataframe) without duplicating existing data in the BQ table

如何在没有云功能的情况下在 GCP 中安排更长的 python 脚本

[英]How to schedule longer python scripts in GCP without cloud functions

Colab+TPU 不支持 TF 2.3.0 tf.keras.layers.experimental.preprocessing

[英]Colab+TPU not supporting TF 2.3.0 tf.keras.layers.experimental.preprocessing

如何使用带有 jsonPayload 的 StructuredLogHandler 将日志发送到 GCP？

[英]How to send logs to GCP using StructuredLogHandler with jsonPayload?

暂无

暂无

声明:本站的技术帖子网页，遵循CC BY-SA 4.0协议，如果您需要转载，请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.

相关问题 如何解决 TPU 推理的数据获取瓶颈？使用 TPU runtime 在 Google Colab 上训练错误 Keras Model 如何使用 GCP 负载均衡器将 HTTP 重定向到 HTTPS 如何使用 gcloud sdk 创建没有 default.network 的 gcp 项目无法将数据从 CoLab 加载到 Bigquery 我正在使用 MySQL 的 GCP 数据流到 Bigquery 进行历史数据加载和 CDC/增量加载。我正在获取历史负载但不是增量负载？如何从 GCS 将数据加载到 BigQuery（使用 load_table_from_uri 或 load_table_from_dataframe）而不复制 BQ 表中的现有数据如何在没有云功能的情况下在 GCP 中安排更长的 python 脚本 Colab+TPU 不支持 TF 2.3.0 tf.keras.layers.experimental.preprocessing 如何使用带有 jsonPayload 的 StructuredLogHandler 将日志发送到 GCP？

相关标签

粤ICP备18138465号 © 2020-2024 STACKOOM.COM