代码拉取完成,页面将自动刷新
目前增量同步分为两段:
1)读出变更->数据处理->写入缓冲
2)读缓冲->写入目标数据源。
目前在1)出错时会不断重试,2)失败时会直接失败
在实际使用时1)有可能出现某一条数据在相当长的时间内无论如何也重试不好的情况,比如dql情况下查库出错或者插件转换时有bug等。如果一直保持重试会阻塞后面的变更,比较危险。
2)失败的数据可能只是由于目标数据源短暂不可用,目前只要是写失败就没办法再触发重试了。
比较理想的情况:1)2)都能够指定重试的次数和间隔,多次重试后最终失败的也能够通过手动触发方式再次重试。
一些其他想法:增量存在顺序,非dql重试可能要考虑合并后来数据,比较难搞。可以先考虑dql的增量,因为dql是每次通过sql取最新的数据,比较好做一些。
此处可能存在不合适展示的内容,页面不予展示。您可通过相关编辑功能自查并修改。
如您确认内容无涉及 不当用语 / 纯广告导流 / 暴力 / 低俗色情 / 侵权 / 盗版 / 虚假 / 无价值内容或违法国家有关法律法规的内容,可点击提交进行申诉,我们将尽快为您处理。
登录 后才可以发表评论