数据仓库ETL的瓶颈

Scyalcire · FineReport非专业且编外人士

请问有大神乐意简述一下在做数据仓库之ETL的时候，遇到过增量这个问题，有什么好的解决方案吗？
除了时间戳，还有其他办法吗

Scyalcire · 发表于 2019-12-25 14:59:28

话题太高端嘛年后就要开始做了惨兮兮

饭团君 · 发表于 2019-12-25 15:08:01

你要是想知道解决办法其实可以在问答平台提问。要是想找一些人和你探讨，那可以发在这里

加为好友 · 发表于 2019-12-25 15:16:00

用什么做的数据仓库

天空-小孙 · 发表于 2019-12-25 15:17:46

个人愚见除了时间戳无解，触发器要动业务数据，不敢动。期待下面大神高见

先知 · 发表于 2019-12-25 15:38:35

什麼叫數據倉庫etl

flyingsnake · 发表于 2019-12-25 15:46:15

增量的，我用过时间戳，uuid以及MD5这三个形式。各有利弊。主要是根据甲方的数据情况进行选择。

Doctor_Wei · 发表于 2019-12-25 16:36:29

建议哈，数仓这东西很容易走弯路，建议找人咨询一下，可以不全程参与，但是必须要总体设计。
可以找帆软的商务聊聊，可能也就几人天，而且很有必要

yh19931023 · 发表于 2019-12-25 23:01:40

时间戳没有，就写触发器就行了啊，一个表三个触发器，又不会动原表，抽取触发器生成的临时表数据

加为好友 · 发表于 2019-12-27 11:06:04

用python能不能做

加为好友 · 发表于 2019-12-27 11:06:46

记录上一次最后一个对比值，比如自增的id

28回帖数	1关注人数	8784浏览人数
最后回复于：2020-2-17 14:11