您好、欢迎来到现金彩票网!
当前位置:678彩票 > 服务访问点 >

实施步骤

发布时间:2019-05-05 10:46 来源:未知 编辑:admin

  由于DataWorks中对DLA数据源有白名单限制,您需要根据DLA所属Region,将下表中对应的IP地址或者IP地址段加入DLA的白名单。

  双击日期集合节点进入编辑页面,选择SHELL语言,将要执行的日期值写在一个数组里并保存设置。

  单击调度配置为赋值节点设置一个上游节点。这里可以将当前工作空间的根节点设置为上游节点,比如,本教程工作空间名为dla_project,则上游节点为dla_project_root。

  单击调度配置,在调度配置页面设置依赖关系和节点上下文。上游节点设置为赋值节点日期集合,本节点的输入为赋值节点的输出。

  pure_date的值是从赋值节点读入,每次读取赋值节点的输出结果数组中的一个值。

  dag.offset是DataWorks的系统保留变量,每一次循环次数相对于第一次的偏移量,即第一次循环中offset为0、第二次为1、第三次为2…第n次为n-1。

  变量是用户配置的循环节点的上下文依赖。循环节点内部节点如果需要引用上下文依赖的值,可以直接通过dag.$ctxKey的方式来引用。本教程中,上文配置的上下文依赖key为input,因此可以使用{dag.input}来引用这个值。

  dag.input[$dag.offset]节点数据集初始化的输出是一个表格,可以用偏移量的方式来获取表格数据的某一行。由于每次循环中的值是递增的,所以最后输出的数据应该是{dag.input[0]}、${dag.input[1]}以此类推达到遍历数据集的效果。

  目前DataWorks的开发界面暂不支持运行循环节点,需要提交循环节点后在运维中心测试运行。

  分别单击日期集合和数据清洗SQL页面上的提交按钮进行提交。提交数据清洗SQL时,注意勾选所有节点。

  右键单击日期集合补数据当前节点及下游节点手动执行该组任务。

http://ps-stores.com/fuwufangwendian/230.html
锟斤拷锟斤拷锟斤拷QQ微锟斤拷锟斤拷锟斤拷锟斤拷锟斤拷锟斤拷微锟斤拷
关于我们|联系我们|版权声明|网站地图|
Copyright © 2002-2019 现金彩票 版权所有