从SQL Server高效更新mysql表

我们在数据中心有一个mysql数据库(大部分是只读的,所以是myisam表),它与现场的SQL Server数据库进行对话。广域网存在一些明显的延迟(超过100毫秒);大约6个月后,SQL Server DBMS将向上移动到数据中心(例如,相同的千兆局域网)。

在mysql数据库中,我有几千行需要从SQL Server数据库的结果中更新。MySQLdb连接到一个运行在Linux上的Rails应用程序上,所以我想保留逻辑,以便在任何一个应用程序中尽可能多地迁移数据。 shell脚本或rake/ruby任务 (我们不是Windows应用程序开发人员,因此Win32应用程序等 马上出来 !).

这是一个相当简单的过程。在伪代码中:

SELECT id
     , amount
  FROM bank_account.on_SQL_Server
 WHERE (some logic)

FOREACH ROW:
  UPDATE bank_account.on_MySQL
     SET amount = $some_amount
   WHERE id     = $some_id

假设有几千行需要更新,并且经常更新(每5分钟一次)。另外,假设我无法知道SQL Server中哪些行发生了数量更改(不幸的是!)所以我不能把它限制在只修改过的行上——我必须把它们发送到所有地方(是的,但是SQL Server数据库是一个不能修改的第三方应用程序 编辑:我们确实可以控制DBMS,所以我们可以做一些简单的修改,例如表上的触发器或新的存储过程——只是不更改表模式来添加,比如说,最后一个更新的列——但是我想把这个选项保存为最后一个方法。 )

如何最好地做这个更新过程最小化运行时?这个过程需要每隔几分钟运行一次(越快越好),从Ruby向SQL Server和MySQL发出双重连接的速度太慢了。这可能是一些由myisam引擎发出的写表锁,但转换到innodb似乎不会使其更快(系统正在测试中,因此不容易模拟生产将接收的相同类型的负载,这让我相信它与锁无关)。

我目前倾向于将视图(对应于上面的SQL Server语句)映射到一个文件,将FTP映射到Linux服务器,然后使用Ruby来前移该文件(并执行许多序列化的SQL语句),但我必须想象有更好的方法。