数据抽取(新用户可跳过此章节,先阅读后续章节)

使用到抽取功能的用户才需要查阅此章节

有数支持对数据表进行抽取,将表数据抽取到有数的MPP数据库中,提升查询效率。

有数支持全量抽取、增量抽取两种抽取方式。 全量抽取:每次抽取的时候将表数据全部抽取至有数的MPP数据库。 增量抽取:每次抽取只抽取相比于上次更新增加的数据。

关于增量抽取,需要注意的是: 1、只支持针对日期型(Date)和数值型(Int)的字段作为增量抽取的依据字段; 2、只支持对源表新增的数据做增量,如果源表中对数据有更新或删除操作,增量抽取的时候不会检测到这些变化;

我们可以在“数据源”模块,进行抽取设置。选择需要设置的数据连接后,选择表信息模块,列表中会显示该连接内所有的数据表,我们可以对需要抽取的表进行抽取设置。

进入抽取设置界面后,我们可以将抽取方式设置为全量抽取或增量抽取,当需要定期抽取数据时,可以设置定时任务。若需要暂时停止该表的所有抽取任务,可以勾选“禁用”。

比如下图,设置成每天05:00执行抽取任务。

设置完后,点击“完成”按钮,保存你的抽取设置。

返回数据连接的表信息界面,对于进行过抽取设置的表,我们可以查看执行抽取的历史记录。

其他操作项的功能说明

立即执行:手工立即触发抽取任务,执行1次。

删除:将抽取任务删除,此时程序会检测是否有报告和模型的依赖(即已经基于抽取数据建立了数据模型或报告),如果有依赖,则无法删除。

另外,在项目中心,可以对所有的抽取任务进行统筹管理。

以下结果符合搜索条件 ""

    没有结果符合搜索条件 ""