从一个SQL数据库中导出大量二进制数据，并将其导入到具有相同模式的另一个数据库中

Question

我有一个数据库，其中的图像表仅包含37,000条记录。 每个记录都包含二进制数据形式的图像。 我需要将所有37,000条记录放入另一个数据库，该数据库包含具有约12,500条记录的相同表和架构。 我需要使用IF NOT EXISTS方法将这些图像插入数据库，以确保完成后没有重复。

我尝试将数据导出到excel并将其格式化为脚本。 （我以前在其他表中都这样做过。）问题是，excel不支持二进制数据。

我还尝试了SSMS中的“生成脚本”向导，该向导不起作用，因为.sql文件已超过18GB，而我的PC无法处理它。

还有其他一些SQL工具可以执行此操作吗？ 我已经搜索了几个小时，但无济于事。 谢谢你的帮助！

Answer 1

为什么不尝试使用“导出数据”功能？ 这应该工作。

右键单击源数据库，选择“任务”，然后选择“导出数据”。 然后按照说明进行操作。 您还可以保存设置并定期执行任务。

同样，bcp.exe实用程序可以从一个数据库读取数据并插入另一个数据库。

但是，我建议使用第一种方法。

更新：为了避免重复，您必须能够比较图像。 不幸的是，您不能直接比较图像。 但是您可以将它们转换为varbinary(max)进行比较。

所以这是我的建议：
1.将表复制到新数据库中，名称为tmp_images
2.使用merge命令仅插入新图像。

Answer 2

我已经为此使用SQL Workbench / J。

您可以通过文本文件使用WbExport和WbImport （二进制数据将作为单独的文件写入，并且文本文件包含文件名）。

或者，您可以使用WbCopy直接复制数据而无需中间文件。

要实现“如果不存在”的方法，可以使用更新/插入模式，尽管那样会更改现有行。

我认为不存在“仅在不存在模式下才插入”，但是您应该能够通过定义唯一索引并忽略错误来实现此目的（尽管虽然速度不是很快，但是应该可以少量的行）。

如果“ exists”检查更加复杂，则可以将数据复制到目标数据库的临时表中，然后使用SQL将其合并到实际表中。

Answer 3

INSERT INTO DB1.dbo.table_name
SELECT  * FROM DB2.dbo.table_name
WHERE column_name NOT IN
(   
  SELECT column_name FROM DB1.dbo.table_name
)