Sequelize：批量更新或插入 MSSQL DB

Question

我花了过去 24 小时在互联网上寻找解决方案，但还没有找到。 我正在尝试将单个模型批量更新插入（更新或插入）到 mssql 数据库中。 带有 updateOnDuplicate:true 的 bulkCreate 不适用于 mssql。 还有其他解决方案吗？ 这是数据集在 1-50k 行之间的任何位置。 任何帮助将不胜感激！

Answer 1

使用 OpenJson 将您的数据转换为表并与源表合并，如下所示：

const upsertedData = [
  {
    id: "123",
    value: "Value 2"
  },
  {
    id: "124",
    value: "Value 1"
  }
]

const upsert = async (data) => {
  await sequelize.query(
    `BEGIN
      DECLARE @json NVARCHAR(MAX);
      SET @json = :dataToBeUpserted
      MERGE INTO dbo.tableToBeUpserted AS Target
      USING (SELECT * from OpenJson(@json) WITH (
          id nvarchar(32),
          value nvarchar(32),
      )) AS Source
      ON (Target.id = Source.id)
      WHEN MATCHED THEN
      UPDATE SET 
          Target.value = Source.value
      WHEN NOT MATCHED THEN           
          INSERT (id, value)
          VALUES (Source.id, Source.value);
    END`,
    {
      replacements: {
        dataToBeUpserted: JSON.stringify(data)
      },
    }
  )
}

await upsert(upsertedData)

Answer 2

对于 SQL 2016+，您可以简单地使用 NVarchar(max) 参数将批量数据作为 JSON 传递，然后在服务器上解析和加载它。 您的查询将如下所示：

Insert into TargetTable(Number,Date,Customer,Quantity,[Order])
SELECT Number,Date,Customer,Quantity,[Order]
FROM OPENJSON ( @json )  
WITH (   
              Number   varchar(200)   '$.Order.Number',  
              Date     datetime       '$.Order.Date',  
              Customer varchar(200)   '$.AccountNumber',  
              Quantity int            '$.Item.Quantity',  
              [Order]  nvarchar(MAX)  AS JSON  
 );

您可以将 @json 参数与 NVarchar(max) （字符串）值绑定，例如：

[  
  {  
    "Order": {  
      "Number":"SO43659",  
      "Date":"2011-05-31T00:00:00"  
    },  
    "AccountNumber":"AW29825",  
    "Item": {  
      "Price":2024.9940,  
      "Quantity":1  
    }  
  },  
  {  
    "Order": {  
      "Number":"SO43661",  
      "Date":"2011-06-01T00:00:00"  
    },  
    "AccountNumber":"AW73565",  
    "Item": {  
      "Price":2024.9940,  
      "Quantity":3  
    }  
  }
]

更新将类似于：

 with q as
 (
    select t.Number, t.Quantity oldQuantity, j.Quantity newQuantity 
    from OPENJSON ( @json )  
    WITH (   
                  Number   varchar(200)   '$.Order.Number',  
                  Date     datetime       '$.Order.Date',  
                  Customer varchar(200)   '$.AccountNumber',  
                  Quantity int            '$.Item.Quantity',  
                  [Order]  nvarchar(MAX)  AS JSON  
          ) j
    join TargetTable t
      on j.Number = t.Number
 )
 update q set oldQuantity = newQuantity

请参阅： https : //docs.microsoft.com/en-us/sql/t-sql/functions/openjson-transact-sql

如果您无法绑定参数，那么在紧要关头，您可以将 JSON 文档作为文字字符串包含在您的 TSQL 批处理中。