将 MySQL 加载到 BigQuery - DATE 问题

Question

我是 SQL 的初学者，我被阻止了。 我在连接到 BigQUery 的 DBT 中创建 model 但出现以下错误：

服务器错误：rpc 请求中的数据库错误（来自远程系统）读取数据时出错，错误消息：无法将第 1 行的 created_at 列从 MySQL 转换为 BigQuery。 错误：返回非 DATETIME 值：0000-00-00 00:00:00，DATETIME 必须采用格式：'YYYY-[M]M-[D]D[(|T)[H]H:[M] M:[S]S[.DDDDDD]]'，范围在 0001-01-01 00:00:00 到 9999-12-31 23:59:59.999999 之间。 您可以使用 MySQL 格式化函数将 DATE 转换为 BigQuery 格式。

我的 model 如下：

with source_data as (
    SELECT * FROM EXTERNAL_QUERY("xxxxxx", "SELECT * FROM xxxxx"))
SELECT
  id, 
  created_at
FROM
  source_data

然后，我用谷歌搜索了一个技巧： https://medium.com/google-cloud/loading-mysql-backup-files-into-bigquery-straight-from-cloud-sql-d40a98281229

我按照中篇文章的步骤进行操作，但出现以下错误：

服务器错误：rpc 请求中的数据库错误（来自远程系统）语法错误：预期为“）”或“，但得到 integer 文字“0000”

 {{ config(materialized='table') }} 
 with source_data as ( 
   SELECT * EXCEPT(x) REPLACE(x AS created_at) 
   FROM EXTERNAL_QUERY("master-...sql", 
        "SELECT *, IF(created_at= "0000-00-00 00:00:00"
                   , null, created_at) x 
         FROM xxxxx 10") ) 
SELECT id, created_at FROM source_data

有人能帮助我吗？

谢谢！

Answer 1

我是 SQL 的初学者，我被阻止了。 我在连接到 BigQUery 的 DBT 中创建 model 但出现以下错误：

服务器错误：rpc 请求中的数据库错误（来自远程系统）读取数据时出错，错误消息：无法将第 1 行的 created_at 列从 MySQL 转换为 BigQuery。 错误：返回非 DATETIME 值：0000-00-00 00:00:00，DATETIME 必须采用格式：'YYYY-[M]M-[D]D[(|T)[H]H:[M] M:[S]S[.DDDDDD]]'，范围在 0001-01-01 00:00:00 到 9999-12-31 23:59:59.999999 之间。 您可以使用 MySQL 格式化函数将 DATE 转换为 BigQuery 格式。

我的 model 如下：

with source_data as (
    SELECT * FROM EXTERNAL_QUERY("xxxxxx", "SELECT * FROM xxxxx"))
SELECT
  id, 
  created_at
FROM
  source_data

然后，我用谷歌搜索了一个技巧： https://medium.com/google-cloud/loading-mysql-backup-files-into-bigquery-straight-from-cloud-sql-d40a98281229

我按照中篇文章的步骤进行操作，但出现以下错误：

服务器错误：rpc 请求中的数据库错误（来自远程系统）语法错误：预期为“）”或“，但得到 integer 文字“0000”

 {{ config(materialized='table') }} 
 with source_data as ( 
   SELECT * EXCEPT(x) REPLACE(x AS created_at) 
   FROM EXTERNAL_QUERY("master-...sql", 
        "SELECT *, IF(created_at= "0000-00-00 00:00:00"
                   , null, created_at) x 
         FROM xxxxx 10") ) 
SELECT id, created_at FROM source_data

有人能帮助我吗？

谢谢！