使用来自转储 sql 文件的数据填充 rails 应用程序

Question

我想将数据库导入到 rails 应用程序，我有一个数据库的转储文件，其中有：

*!40000 ALTER TABLE `client` DISABLE KEYS */;
INSERT INTO `client` (`Id`,`ClientTypeId`,`Name`,`Address`,`Mobile`,`Phone`,`Fax`,`Email`,`ContactName`,`ContactMobile`,`ContactEmail`) VALUES 
 (69,1,'ФК Астана','БЦ Москва;-;-','72-99-50, 72-99-49','72-99-50, 72-99-49','72-99-50, 72-99-49','alima_fcast@mail.ru','Алима','610-291','alima_fcast@mail.ru'),
 (70,1,'Береке Каб','13 магистраль;-;-','965-094','965-094','965-094','d.nurmoldin@bkab.kz','Дидар','+77015145781','d.nurmoldin@bkab.kz'),
 (71,1,'Канам Агро','БЦ Астаналык ;3 этаж;3 этаж','500-000','500-000','-','a.tulubaeva@canam.kz','Асемгуль','',''),

实际列表当然更长。 有没有办法将该 INSERT 语句放置在 rails 应用程序中的某个位置并为我的数据库播种。

假设我有客户 model。 在我的开发环境中，我使用 sqlite，数据从 mysql 数据库中转储。

Answer 1

我最近将生产数据库从PHP / mySQL迁移到Ruby on Rails / Postgres 。 对于背景，我正在使用NGINX / Unicorn在Digital Ocean服务器上运行Rails应用程序。

本质上，我一直在寻找一种很好的数据库中立方法，无需担心数据库特性，但可以保留我的所有数据。 我花了几个小时尝试使用YAML进行迁移，但是尽管使用sed ， perl等大量自定义数据进行了批量处理，但还是导致了一个接一个的问题。在SO上有人建议我尝试一下之后，我转为CSV并改善了生活戏剧性的。

从mySQL导出

我使用phpMyAdmin在源系统中管理mySQL数据库。 这些是我导出数据所采取的步骤：

1. 创建一个简单的维护页面，并使用.htaccess中的重写规则将所有网站流量路由到该页面。
2. 备份生产数据库（我将其用于所有工作）。
3. 处理源数据以匹配目标系统上的列（仅在架构已更改时才需要）。
4. 一次导出到CSV一张表格。 我使用了制表符分隔符，将双引号用作引号，并引用了特殊字符，因为它们在Postgres是这样使用的，并且将所有NULL都替换为空。 我还从数据中删除了所有换行符，因为这会增加迁移的复杂性，并且删除它们不会对客户数据产生重大影响。
5. 将数据复制到目标服务器。 实际上，我分两个步骤进行操作-首先使用Cloud9的文件上传到我的Cloud9 IDE帐户，然后使用scp从那里到我的服务器（类似于scp -P 1234 table.txt user@10.20.30.40:/tmp ）。

转变

1. 添加时间戳列。 在我的情况下，我的桌子并没有全部容纳它们，并且它们应该在Rails （显然是一件非常好的事情）。 我实际上是在源系统上进行了此转换，但是在此过程中，我可以很容易地向每个记录添加两个日期字段。 这就是为什么我使用制表符分隔符的原因-这样我就可以轻松地将文件作为文本导入Excel并添加这两列。
2. sed -i 's/\\t/,/g' table.txt用逗号替换所有选项卡。
3. sed -i 's/\\\\//g' table.txt删除所有反斜杠（我在PHP反斜杠地狱的日子中剩下的）。
4. perl -i -pe 's/[^[:ascii:]]//g' table.txt删除非ASCII字符。

加载

1. 我以前通过定期部署和迁移在生产服务器上创建了所有表。
2. 运行truncate table; 在Postgres中为每个表删除测试数据。
3. \\COPY table FROM '/tmp/table.txt' DELIMITER ',' CSV;运行\\COPY table FROM '/tmp/table.txt' DELIMITER ',' CSV; 在Postgres中将每个表加载到生产环境中。
4. select count(id) from table;运行select count(id) from table; 在Postgres中为每个表设置，并确保该数字与原始行数匹配。
5. 运行select setval('table_id_seq', (select max(id) FROM table)); 在Postgres中重置Postgres自动增量计数器。

由于讨厌的小惊喜学习而增加了最后一步。 当我迁移表时，大多数表都缺少唯一ID，这些ID已删除了旧数据。 当数据迁移到Postgres ，默认情况下它将以最低的可用ID号开始自动递增。 在该可用数字块用完并且您的应用程序因重复的键错误而无法插入时，此方法可以正常工作。

就是这样。 我遇到了其他问题，但是通常没有严格的数据迁移相关。

在进行转换和上线之前，我还测试了此过程的大部分或全部三遍。 我强烈建议您尽可能地进行测试，并让友好的用户看一下迁移的数据，并在预生产中使用该系统。 当然，mo数据是mo问题，因此YMMV取决于数据集的大小。

希望这会有所帮助-如果您有任何疑问，请告诉我。

Answer 2

当我尝试将数据库转储（在我的情况下为文件名.sql）文件的数据复制到我在本地使用的数据库中时，我发现这篇文章很有帮助

https://medium.com/ruby-rails-tips/importing-database-dump-in-ruby-on-rails-4591ff80e9e1

Answer 3

我认为Temitayo Adeleke的回答不应该被否决。 我无法对答案发表评论或投票，因为我没有所需的声誉