DataStage基础培训教程.ppt

《DataStage基础培训教程.ppt》由会员上传分享，免费在线阅读，更多相关内容在教育资源-天天文库。

1、DataStage基础培训Jerry2006.03议程HelloWorldDataStageComponentsDefineParameter&TableHashFile、Transformer、AggregatorDirector&MonitorAdministrator&ManagerRoutine&Control2演示：HelloWorldExtractTransformLoan3HelloWorldDataStageComponentsDefineParameters&TablesHashFile、Transformer、AggregatorDirector&MonitorAdmi

2、nistrator&ManagerRoutine&Control议程4DataStageArchitectureTarget(DatabaseorFile)ODBC/NativeDataStageConnectAPIDataStageServer(WinNT,Win2000orUNIX)ODBC/NativeDataSources(DatabaseorFile)DataStageConnectAPIDataStageConnectAPIDataStageConnectAPIDataflowDataflow5DataStageComponentsManagerDesignerDirector

3、MetadatacollectionandmanagementDesignprocessflowRunjobs,checklogsandsetschedulesDataStageAdministratorCreate,Editprojects6HelloWorldDataStageComponentsDefineParameter&TableHashFile、Transformer、AggregatorDirector&MonitorAdministrator&ManagerRoutine&Control议程7全局变量与Job变量全局变量--生命周期：整个Project--在Adminis

4、trator中定义Job变量--生命周期：一个Job--在Designer、Manager中定义8演示：定义一个Job变量在Designer中定义参数9Metadatadefinition元数据管理的重要组成部分在Manger或Design中定义演示：--importfromaflatfilein.txtformat--importfromanDBMStable10演示TableDefinition在Manage中定义Table11HelloWorldDataStageComponentsDefineParameter&TableHashFile、Transformer、Aggregato

5、rDirector&MonitorAdministrator&ManagerRoutine&Control议程12演示：生成事实表明细表事实表关联聚合13HashFile用途：--左连接时用作副表--多次被访问的数据集--存储其他临时数据关键点：--必须指定key--output的position必须与input一致14Transformer用途：--提供丰富的运算符和函数--数据清洗、转换--关联多个数据源关键点：--副表的key必须被主表的某个字段关联--尽量避免两个Transformer直接相连15Aggregator用途：--Sum,Max,Min,Average等聚合函数--一般

6、用于生成事实表16HelloWorldDataStageComponentsDefineParameter&TableHashFile、Transformer、AggregatorDirector&MonitorAdministrator&ManagerRoutine&Control议程17DebugandTuningViewStatusandLogs-status,log,detail等多种视图-配合Monitor来查错、调优18JobStatusNotCompiledCompiledResetRunningFinishedFinished(withwarning)Abort19Sche

7、duleJobAddtoSchedule20HelloWorldDataStageComponentsDefineParameter&TableHashFile、Transformer、AggregatorDirector&MonitorAdministrator&ManagerRoutine&Control议程21AdministratorAddanewprojectModifyprojectproperties-字