同步2个表：一个带引擎=内存另一个带引擎= InnoDB

Question

我有2个表，student_memory（engine = Memory）和student_innodb（engine = InnoDB）。 某个线程正在不断更新student_memory（间隔为2秒）。 我必须同步两个表（比如每隔10秒）。 我有一些方法：
1.通过查看2个表之间的差异并在student_innodb上运行这些查询来创建插入/更新/删除语句。
2.删除student_innodb ，ALTER TABLE student_memory ENGINE = INNODB，RENAME TO student_innodb ;
3.截断student_innodb表，然后插入student_innodb从student_memory选择*;

我正在使用第二种方法，因为这可以节省我比较表的行，创建INSERT/UPDATE/DELETE并执行它们。 但我不确定性能。 这些表中可以有大约1000-100000行。 谁能建议任何其他更好的解决方案或我应该使用哪一个？

Answer 1

要回答你的问题，可能最快的方法是在两个表上都有某种主键（例如student_id）。 然后，您应该添加第三个内存表changed_students_memory，它只有一个student_id字段作为它的主键。

每当你改变students_table时，你应该：

INSERT (student_id) VALUES (:student_id) INTO changed_students_memory ON DUPLICATE KEY IGNORE

然后，您只需要在changed_students_memory中更新要更新的记录列表。 然后，您可以更新您的innodb表：

BEGIN;

UPDATE
  student_innodb AS i
  JOIN student_memory AS m USING (student_id)
  JOIN changed_students_memory USING (student_id)
SET
  i.<fieldname1> = m.<fieldname1>,
  i.<fieldname2> = m.<fieldname2>... ;

TRUNCATE TABLE changed_students_memory;

COMMIT;

如果您只更新一小部分行，这将会快得多。 我还要提到的是，根据该假设，使用第三个表比将“脏”列添加到现有内存表并在其上添加索引更好，因为大多数情况下优化器不会使用索引，因为它不会认为它有足够的选择性。

说完了所有这些 - 我猜测如果你在内存表中做了所有这些疯狂的事情，那么你的问题就会接近你的错误。 内存表并不意味着长时间存储数据。 如果数据库出现故障，您将丢失数据。 如果你有内存表作为性能优化，你最好调整你的INNODB设置。 如果配置正确，INNODB非常快。 我可以轻松处理来自数百个并发连接的负载。 如果给它足够的内存，INNODB会将所有热数据保存在内存中（请参阅my.cfg / my.ini中的innodb_buffer_pool_size）。

Answer 2

我知道这是一个老问题，但对于那些来自搜索引擎的人（比如我自己），我应该说：

永远不要在上面的问题中实现任何解决方案，首先你可以获得部分数据丢失，而另外两个解决方案，你可能会丢失全部数据！

最好的方法是对innodb（或内存）执行INSERT / UPDATE / DELETE数据，并设置AFTER INSERT / AFTER UPDATE / AFTER DELETE触发器来更新另一个表的内存。 所以，你永远不会丢失数据，但不要忘记为INSERT / UPDATE / DELETE启用Transaction！

这样，您永远不会丢失数据，并且从内存表中读取数据的速度非常快。 内存表将始终自动同步到Innodb。

1最后一件事：不要忘记配置mysql在服务器启动时自动同步这两个表！