Datastage 安装参考文档
【BI安装】Datastage_V8.1.0_for_Rhel5.4_64bit安装文档
Information Server8.1.0安装文档目录Information Server8.1.0安装文档 (1)备注说明： (1)安装前系统要求： (2)1)WAS安装包需求： (2)2)Infomation Server安装包需求： (3)3)Linux内核参数最低需求 (3)4)HP-UX内核参数最底要求 (4)5)产品和必须安装这些产品的层。
(4)安装步骤： (5)一、系统环境： (5)二、修改内核参数，安装必要必定包： (6)三、安装WAS和两个升级补丁包 (6)1)安装WAS (6)2)将WAS升级到6.0.2.0版本 (10)3)将WAS升级到6.0.2.7版本 (12)四、安装Information Server (18)参数配置： (29)1.配置dsenv文件 (29)2.配置ODBC参数 (30)3.配置DS编译器变量 (32)4.配置dsadm用户的.bash_profile文件 (32)IIS服务启动和停止： (32)1.服务停止 (32)3.服务启动 (33)备注说明：1.要在Linux®和UNIX®上复用现有的DB2安装，必须使用DB2故障监视组件（需要在/etc/inittab文件中输入故障监视器（db2fmcd）的路径）。
db2fmcd命令必须指向实际的可执行文件位置，例如：fmc:234:respawn:/u1/IBM/db2/V9/bin/db2fmcd#DB2Fault Monitor Coordinator2.需要的C++编译器和运行时库：对于64位HP-UX11i v2on Intel Itaium 6.16acc:HP C/aC++B3910B A.06.1432位和64位Red Hat Enterprise Linux5Advanced Platform GCC 4.1.2对于HP-UX11.x和10.x，用下面的命令确定版本:what/opt/CC/bin/CC3.WAS官网安装文档：/infocenter/wasinfo/v6r0/index.jspInfoServ文档：/infocenter/iisinfsv/v8r1/index.jsp?topic=/com.ibm.swg.im.iis.productization.iisinfsv.relinfo.doc/topics/iisihrinfo_infsv_rnote_v81ga.html各种指南：/support/docview.wss?rs=14&uid=swg27013660DB2官方文档：/infocenter/db2luw/v9r5/index.jsp?topic=/com.ibm.db2.luw.qb.se rver.doc/doc/t0006477.html结构拓扑图：安装前系统要求：1)WAS安装包需求：compat-libstdc++-33-3.2.3-61compat-db-4.2.52-5.1libXp-1.0.0-8rpm-build-4.4.2-37.el52)Infomation Server安装包需求：compat-db-4.2.52-5.1compat-libstdc++-33-3.2.3-61 elfutils-0.125-3.el5elfutils-libs-0.125-3.el5glibc-2.5-24libaio-0.3.105-2libgcc-4.1.2-42.el5libstdc++-4.1.2-42.el5libXmu-1.0.2-5libXt-1.0.2-3.1.fc6libX11-1.0.3-9.el5libXtst-1.0.1-3.1libXp-1.0.0-8.1libXext-1.0.1-2.1libSM-1.0.1-3.1libICE-1.0.1-2.1libXau-1.0.1-3.1libXdmcp-1.0.1-2.1pam-0.99.6.2-3.26.el53)Linux内核参数最低需求4)HP-UX内核参数最底要求5)产品和必须安装这些产品的层。
Red hat Enterprise Linux 5.5(64bit)操作系统下Datastage 8.1安装操作指南
Linux（64bit）操作系统下Datastage安装操作指南1.目的本流程旨在规范DataStage在Linux5（64bit）系列操作系统上的安装流程。
2.适用范围本文档适用于在所有操作系统为REDHAT LINUX 5 的DELL R系列PC Server服务器上安装DataStage8.1。
2.1.安装Linux的注意事项2.1.1.检查相关服务关闭防火墙和禁用SEliunx (此安全部件如果不禁用，会导致某些连接无法访问)，也可以在安装完后找到/etc/SeLiunx/下config文件（如果在安装中禁用了，则没有这个文件夹）：修改成SELINUX=disable 禁用SeLinux修改成SELINUX=enforcing 使用SeLinux防火墙开启和关闭：重启后生效开启：chkconfig iptables on关闭：chkconfig iptables off即时生效，重启后失效开启：service iptables start关闭：service iptables stop2.1.2.软件包是否安装齐全用rpm -qa | grep +文件名命令检查附：所有必须安装装软件包。
如果没有安装全建议配置yum源Yum数据源的创建编辑vi /etc/yum.repos.d/rhel-debuginfo.repo如下：[server]name=Red Hat Enterprise Linux $releasever - $basearch - Debugbaseurl=file:///media/Serverenabled=1gpgcheck=1gpgkey=file:///etc/pki/rpm-gpg/RPM-GPG-KEY-redhat-release进行yum测试测试yum源是否安装成功用yum数据源安装以下数据包：yum install compat*yum install elfutils*yum install glibc*yum install lib*yum install pam*图1 32位操作系统图2 64位操作系统2.1.3.创建安装目录#mkdir DSSetup，将DataStageSvr_v8.1_RHEL.tar.gz，updater.jar，BOClic_1.xml，patch，四个文件拷入/root/DSSetup , 将DataStageSvr_v8.1_RHEL.tar.gz解压之后得文件夹，is-ia-suite。
Datastage产品安装手册
Datastage产品安装配置手册目录DATASTAGE (1)产品安装配置手册 (1)目录 (1)1. 引言 (2)2. SERVER安装 (2)2.1.S ERVER安装准备 (2)2.1.1. 硬件及软件准备 (2)2.1.2. 创建用户及组 (2)2.1.3. 系统参数设置 (3)2.2.S ERVER安装步骤 (3)2.3.安装完毕，检查后台S ERVER是否启动正常 (15)3. CLIENT安装 (16)4. EESTAGE配置： (16)4.1.配置前准备 (16)4.2.配置过程 (16)4.3.测试 (17)1.引言DataStage EE ７．５．２Server安装在hp unix平台上，Client端安装在Windows平台上。
以下为详细说明其安装步骤。
2.Server安装2.1.Server安装准备2.1.1.硬件及软件准备2.1.2.创建用户及组1.运行sam命令，启动管理界面2.在安装机器上创建dstage组3.创建用户dsadm，属于dstage组和dba组。
dsadm用户要有存取权限2.1.3.系统参数设置1)检查Server端paging space的空间，对于CPU数量少于20个的机器，最好整个Paging Space为500M×CPU数，如机器配置了8个CPU，则推荐至少需要配置4GB的Paging Space空间。
2)检查核心参数，不符合要求则针对操作系统进行如下调整(使用sam)：3)检查参数Maximum number of PROCESSES allowed per user，设置Datastage允许运行的最大进程数，推荐设置到较大的值，如：8192。
2.2.Server安装步骤确保以超级用户root进入系统(非常重要)如果是硬盘包，则执行命令：gunzip 2105-ds-75a-aix.tar.Z进入解压目录Tar xvf 2105-ds-75a-aix.tar进入/解压环境/Ascential.media/aix目录如果是光盘包，则执行命令： Mount /cdrom进入 /cdrom目录1)执行./INSTALL.SH\;1。
DataStage安装手册
DataStage安装手册目录1、引言 (3)1.1、编写目的 (3)1.2、软件版本 (6)1.3、安装环境 (8)2、安装DataStage Server (13)3、安装DataStage Client (16)4、注意事项 (22)1、引言1.1、编写目的本人在07年1月22日至1月26日在深圳参加了IBM IIS技术加油站的培训。
此文档是本人上课的笔记和总结，作为个人学习所用，如有雷同，纯属抄袭。
1.2、软件版本此DataStage的版本为7.5.x.2，软件是培训老师所给。
是个测试版本，有较多的bug，勉强可用于学习。
安装于Windows英文OS（不装在英文OS将无法使用大部分的功能）。
1.3、安装环境●Server可以安装在Windows2000 service pack 4 (Professional,Server,Advanced)or Windwos 2003(Standard,Enterprise)or UNIX系统中。
●Client可以安装在Windows2000 service pack 4(Professional,Server,Advanced)or WindowsXP Professional上。
●如果Server and Client安装于同一主机还必须安装 .NET framework v1.1●装文档中Server跟Client安装与同一主机，系统为英文版Windows 2000。
2、安装DataStage Server1、插入DataStage 安装盘2、选择Install Server Software3、accept安装协议4、输入license5、Next, 继续输6、选择安装路径7、选择server支持的language8、选择所需安装的plugins9、创建一个新的工程1０、安装完成，restart系统3、安装DataStage Client1、选择Install Server Software2、accept安装协议3、输入license4、选择安装类型and 安装路径5、安装完成DataStage 安装手册4、注意事项1、为了保证DataStage Client程序的正常运行，必须保证DataStage Server保持运行状态2、在Windows2000的控制面板中打开DataStage的控制面板，可以启动或者停止全部的DataStage服务3、在安装或者重新安装DataStage的时候，这些服务一定要全部停止11。
DataStage客户端安装及使用文档
DataStage 客户端安装及使用文档1.客户端安装1.1 安装步骤解压客户端文件client_IA-suite.rar，完成后，进入目录，client_IA-suite，运行install.exe，会提示如下：选择英语，点击确定，安装时，最好关闭防火墙，选择要安装客户端的位置，点击NEXT：选择要安装的组件，点击NEXT：选择安装模式，点击NEXT：点击INSTALL后，开始安装：点击FINISH，安装完成。
安装完成后，在本机的HOSTS文件中需要配置一下：目录：C:\Windows\System32\drivers\etc在最后一行添加如下：# localhost name resolution is handled within DNS itself.# 127.0.0.1 localhost# ::1 localhost17.83.26.110（IP地址为服务器地址）ETL110（这个名字可以自己取）1.2 DataStage Client组件安装完成后有如下组件：1.Administrator Client用于创建DataStage 用户，创建，移动项目，设置清除标准的用户界面。
2.Director Client用来验证，计划时间，运行，监控DataStage 作业的用户界面。
3.Designer Client用来创建DataStage 应用（或作业）的设计接口。
每个作业都指定数据源，所需的转换和数据的目的地。
作业被编译成可执行的，由Director 计划，由Server 运行（主机作业被转移，在主机上运行）。
4.Datastage Manager用于存储和管理JOB 的元数据，使之可以在DataStage Designer 中再度被使用，包括库表定义、集中的转换程序等，并对工程备份和恢复。
2.组件使用2.1Administrator Client2.1.1登陆界面ETL110为刚刚我们在HOSTS中配置的名字，端口一般都是9080输入DOMAIN和账号密码完成后，点击DATASTAGE SERVER 右边的小三角，这时DATASTAGE会去验证用户名密码，成功后，会出来下拉框，这时证明已经联通了，选中一个SERVER，点击OK即可登陆2.1.2设置参数登陆成功后，界面如下：General页签：Projects页签：点击工程属性按钮后，显示界面如下：General 页签：Protect Projec t :设置项目为protected, 如果一个项目已经是protected，则按钮就显示为“Unprotect Project”Auto-purge of job log：每个Job 都对应一个log 文件，Job 的每一次运行都会产生新的log 附加到log 文件中，如果不及时清除无用的log，将会占用大量的空间，同时还会影响Job 的运行效率。
datastage8.1 for Windows安装文档
Client
o
m
w
w
w
w
PD
F -X C h a n ge
PD
F -X C h a n ge
O W !
N
y
bu
to
k
lic
C
m
C
lic
k
to
bu
y
N
.c
O W !
w
.d owo Nhomakorabea.d o
c u -tr a c k
c u -tr a c k
.c
o
m
w
w
w
w
PD
F -X C h a n ge
PD
F -X C h a n ge
DataStage
metadata
o
m
w
w
w
w
PD
F -X C h a n ge
PD
F -X C h a n ge
O W !
N
y
bu
to
k
lic
C
m
C
lic
k
to
bu
y
N
.c
O W !
w
.d o
w
o
.d o
c u -tr a c k
c u -tr a c k
.c
o
m
w
w
w
w
PD
F -X C h a n ge
.c
3
.
o
m
w
w
w
w
PD
F -X C h a n ge
PD
F -X C h a n ge
datastage入门教程
DATASTAGE总结一、安装datastageA、安装服务端安装虚拟机(注册码在文件中)---解压datastage安装包redhat3__Datastage----点击解压文件中Red Hat Enterprise Linux 3---安装---在虚拟机启动---查看虚拟机IP地址，在dos窗口验证是否可以连接---打开secureCRT，连接虚拟机---进入/app/oracle/product/10.2/network/admin/tnsnames.ora中---按E键，再按i 进入编辑状态---将IP地址设为本机Ip地址，数据库实例名自己设置---按ESC、W、Q、：键退出---完成B、安装客户端解压datastage客户端安装包Datastageclient---点击解压文件datastage7.5.3\datastage client---安装---注册码在datastage7.5.1下载地址及license中----完成二、DATASTAGE主键1、transforme r（oracle----transformer---file）数据源oracle设置properties\source\readmethod=auto-generated sqlproperties\source\table=要导入的表名点击connection，出现remote server=数据库实例名，user=Scott，password=tigerColumns下将length设置合适---load---oracleI9--选定导入的表名---ok注意：若不知道导入表的格式Columns下将length设置合适---load---import---plug-in meda data definitions---oracleI9--ok---数据库实例名，用户名、密码---ok--选择Scott用户下---选表--- 导入Transformer设置：将需要显示的字段拖拽过去---ok目标文件file设置：properties下file--填入保存路径first line is columns name=trueFomat下点击record level 添加record delimiter 属性为UNIX newline点击field defaults 添加 null field value 属性为0 Quote=noneColumns下将length设置合适----ok以下主键数据源或目标文件为oracle/file的设置同上transformer的设置方法2、转存（file---transformer---file）Transformer设置：将需要显示的字段拖拽过去---ok3、导入（file---transformer---oracle）Transformer设置：将需要显示的字段拖拽过去---ok4、copy（file--copy--多file）：一个输入，多个输出Copy设置：stage当只有一个输入及一个输出时最好将Force设置为TrueOutput下将需要显示的字段拖拽过去---ok5、filter（file--filter---多file）：只有一个输入，可以有多个输出Filter设置：stage下properties\where clause=过滤条件--点击whereclause出现output link=slink值（在link orderingzhong看对应值） Output下将需要显示的字段拖拽过去---ok6、join（多oracle---join---file）：多表连接Join设置：stage下properties\join keys\key=关联字段，options\join type=连接类型（内、全、左、右连接）Output下将需要显示的字段拖拽过去---ok7、look up(多oracle---look up--file):数据的查询Look up设置：将关联字段连接，再将需要显示的字段拖拽过去8、merge(多file---merge---file):相同数据的合并Merge设置：stage下properties\merge keys\key=字段，sort order=排序Options下unmatched masters mode=保留/删除Output下将需要显示的字段拖拽过去---ok9、funnel（多file---funnel---file）：数据的合并Funnel设置：stage下properties\options\funnel type=选择合并方式Output下将需要显示的字段拖拽过去---ok10、aggregator(oracle---aggregator---file):数据的分类、汇总Aggregator设置：stage下properties\grouping keys\group=分组字段点击aggregations\aggregation type出现column for calculation=聚合字段及合方式，可以取最大值，最小值， Sum值，count值等多种聚合方式。
datastage综合使用参考手册
Ascential DataStage Enterprise Edition 综合使用参考手册目录目录 (I)1. 引言 (1)1.1.编写目的 (1)1.2.帮助使用 (1)2. 产品概述 (2)2.1.A DVANCED D EVELOPMENT AND M AINTENANCE (2)2.2.C OMPLETE D EVELOPMENT E NVIRONMENT (3)2.3.H IGHLY S CALABLE A RCHITECTURE (6)2.4.E ND－TO－E ND E NTERPRISE M ETA D ATA (7)3. 安装 (8)3.1.S ERVER安装 (8)3.1.1. Server安装前准备 (8)3.1.2. Server安装步骤 (9)3.1.3. 验证DataStage的安装 (22)3.1.4. Server启动和停止 (23)3.2.C LIENT安装 (24)4. 常规应用 (24)4.1.常用组件使用方法 (24)4.1.1. Sequential file (24)4.1.2. Annotation (27)4.1.3. Change Capture Stage (29)4.1.4. Copy Stage (31)4.1.5. Filter Stage (32)4.1.6. Funnel Stage (33)4.1.7. Tansformer Stage (34)4.1.8. Sort Stage (35)4.1.9. LookUp Stage (36)4.1.10. Join Stage (36)4.1.11. LookUp Stage 和Join Stage的区别 (38)4.1.12. Merge Stage (38)4.1.13. Modify Stage (39)4.1.14. Data Set Stage (40)4.1.15. File Set Stage (41)4.1.16. Lookup File Set Stage (43)4.1.17. Oracle Enterprise Stage (45)4.1.18. Aggregator Stage (46)4.1.19. Remove Duplicates Stage (48)4.1.20. Compress Stage (49)4.1.21. Expand Stage (50)4.1.22. Difference Stage (51)4.1.23. Compare Stage (53)4.1.24. Switch Stage (54)4.1.25. Column Import Stage (55)4.1.26. Column Export Stage (57)4.2.常用数据库的连接 (59)4.2.1. Informix数据库连接 (59)4.2.2. Oracle数据库连接 (60)5. 高级应用 (62)5.1.D ATA S TAGE BASIC接口 (62)5.2.自定义S TAGE T YPE (62)5.2.1. Wrapped Stage (62)5.2.2. Build Stage (67)5.2.3. Custom Stage (75)5.3.性能调优 (75)5.3.1. 优化策略 (75)5.3.2. 关键问题分析 (79)5.3.3. 并行度 (80)5.3.4. 处理建议 (80)5.3.5. 其它 (80)5.3.6. 机器的对称性 (81)5.3.7. 并行调度测试说明： (81)6. 开发经验技巧汇总 (82)6.1.1. 问题 (82)1.引言1.1.编写目的IBM DataStage作为项目主要使用的ETL开发工具，在项目中得到了比较充分的应用，对IBM DataStage产品方方面面的功能，都有所涉及。