页面树结构

版本比较

标识

  • 该行被添加。
  • 该行被删除。
  • 格式已经改变。

...

把数据写入目标表

配置如下

至此,按分页取数ETL配置已经完成

新建作业流

Image Added

新建作业流,起名为循环分页获取数据

配置作业流循环器

把循环器节点拖入作业流图中

Image Added

配置循环器

Image Added

循环资源:选择上面建好的分页获取数据的etl

循环序号起始值:循环器有循环序号,每循环一次,这个值就加1,这里设置循环序号起始值,这个可以当做参数传递给循环的资源

循环序号参数映射:就是设置循环序号跟循环资源的参数映射,表示循环序号会传给循环资源的哪个参数,这里设置传给etl 的pageNo参数,真正执行的时候,会把循环序号替换为pageNo参数值

循环间隔时间(秒):表示每循环一次,间隔多长时间在进行下一次循环

退出条件:表示只要满足其中一个条件,就退出循环。这里配置成循环的资源执行失败后就退出。按分页去获取数据,如果到最后没有数据了,会造成写入目标表失败,便会退出循环