假定在源数据表A中有一个字段会记录数据的新增或修改时间,可以通过它对数据在时间维度上进行排序。 开发KETTLE任务实现源表A数据到目标表B数据的定时同步,由于数据量比较大,需要进行特殊设置,任务每次执行时,将执行的时间记录在C表中,执行时查询上次执行的时间,将源表A数据和上次执行时间做比较,大于执行时间的数据可以直接增量插入到B表中,小于等于执行时间三天内的源表数据需要目标表数据对比,同步进行修改和删除操作的数据
kettle时间戳增量更新你百度一下,有方法
--------
补充如果不是考试题,可以找我要,我有做过
如果每天数据都很大,这个对比三天差异数据,效率可能还不如直接插入三天了吧