数据仓库-期末考试复习题
复习思考题(重点)
一、单项选择题
(1) 一般信息管理中，采用哪种方式的概念模型最多
A. MapReduce模型
B. 实体-关系模型
C.02O模型
D.B/S模型
(2)在关系表中，下列哪种属性不能承担主列关键字(Key)？
A. 身份证号
B.银行卡号
C.加密电文
D.企业标识码
(3)数据仓库的生命周期中，不包含下列哪个阶段？
A.规划分析阶段
B.设计实施阶段
C.使用维护阶段
D.反馈提升阶段
(4)多维切片是指：
A.在多个维度上观察全员操作
B.多个成员的操作片段
C.旋转数据集的部分维度
D.在线分析或联机分析
(5) 一般信息管理中，采用哪种方式的分布式物理模型最多
A. MapReduce模型
B. 实体-关系模型
C.02O模型
D.B/S模型
(6)在关系表中，下列哪种属性可以成为外键(Key)？
A. 客户信用程度
B.银行卡行号
C.加密的身份证号
D.实体商户地址
(7)数据仓库的生命周期中，不包含下列哪个阶段排在第三阶段？
A.规划分析阶段
B.设计实施阶段
C.使用维护阶段
D.反馈提升阶段
(8)多维报表是指：
A.在多个维度上观察全员操作
B.不同维度格式不同叠加展示
C.旋转数据集的部分维度
D.在线分析或联机分析
(9)数据表的多维索引的作用是：
A.使数据表更节省存储空间
B.加快数据存储速度
C. 表格格式美观大方 C. 加快数据查找效率
(10)MapRedude结构中的MAP职能是？
A.钻取
B.汇聚
C.分发
D.结晶
(11)下列哪种客户需求可以直接成为数据仓库的多维报表？
A.客户销售业绩清单
B.客户基本名册
C.客户关系图表
D.客户反馈信息
(12) 数据仓库开发强调哪种主体特征？
A. 信息安全性
B.业务流程
C.操作事务性
D.数据实时性
(13)数据仓库与数据库系统相比，更加提倡：
A.空间换时间
B.数据范式更严格
C.冗余度更小 C. 更加适用于分布式结构
(14)透视表属于OLAP中的哪种能力范畴？
A.存储能力
B.展示能力
C.稳定性能力
D.安全性能力
(15)OLAP的系统结构分为：
A.胖客户端系统和瘦客户端系统
B. OLAP服务器和多维数据存储
C. OLAP服务器和传输分析处理后结果 C. 多维数据存储和分析处理后结果
(16)MapRedude结构中的Reduce职能是？
A.钻取
B.汇聚
C.分发
D.结晶
(17)下列哪种信息不能直接成为数据仓库的元数据？
A.客户姓名的格式
B.客户基本信息
C.客户关系图
D.客户反馈法则
(18) noSQL数据库更强调哪种特征？
A. 不兼容SQL命令
B.非关系结构
C.非事务性
D.分布式计算
(19)下列哪种关于数据仓库开发的观点是错误的？
A.数据仓库开发的初期不能确定客户需求
B.数据仓库开发过程是循环往复的
C. 数据仓库开发不以客户需求为中心 C. 数据仓库开发是从基础数据出发的
(20)客户关系图表属于下列哪种模型的范畴？
A.概念模型
B.物理模型
C.逻辑模型
D. Odoo模型
(21)C/S网络结构中的C表示：
A.瘦客户
B.客户
C.客户端
D.直连线路
(22)CRM的含义是：
A.企业级数据仓库
B.客户关系管理
C.客户群
D.决策管理系统
(23)企业中对含义不一致的信息进行纠正的操作，叫做：
A.数据清洗
B.数据冗余
C.数据降维
D.数据转置
(24)数据库高级管理员的职责不包括：
A.输入业务数据
B.设置操作员角色
C.设置业务套账 B.系统数据备份
(25)数据仓库按照不同的主体进行组织，可形成
A.数据聚类
B.数据分布
C.数据集市
D.数据链路
(26)数据聚类中的聚簇中心是：
A.事先拟定的
B.搜索的目标
C.动态产生的
D.数据主题
(27)数据代码要解决的主要问题是：
A.节约信息存储空间
B.解决名称混乱问题
C.信息格式整齐
D.方便排序
(28)数据仓库中，下列哪种说法错误？
A.消灭冗余，才能提高效率
B.稳定性比集成性重要
C.集成性直接提高系统的冗余度
D. 稳定性促进高效率
(29)数据粒度是指：
A.数据处理的分割单位
B.数据采集的单元
C.数据抽样的单位
D.数据记录的大小
二、名词
(1)数据仓库
(2)SQL
(3)OLAP
(4)noSQL
(5)DSS
(6)支持度
(7)大数据
(8)E_R图
(9)逻辑模型
(10)O2O
(11)MIS
(12)关键字索引
(13)数据颗粒度
(14)元数据
(15)数据连接
(16)数据颗粒度
(17)概念模型
(18)数据挖掘
(19)聚类
(20)事务性
(21)B2B
(22)B2C
(23)DBMS
(24)ERP
(25)数据粒度与数据分割的区别
(26)时标法
(27)自顶向下法
(28)雪花模型
(29)数据表主键
三、模型设计
1.某航空公司具有如下概念数据模型，请分析出适用的逻辑模型。
2.数据集约简
基础数据表格式如下：
3.数据仓库逻辑模型设计
基础数据表格式如下：
请对上述数据表，进行约简设计，写出约简表结构，并做必要说明。
四、书写SQL 命令（4分*4=16分） 基本数据表格式如下：
表：customer 表：SP
表：suyr 表：wids 表Pay
请按如下要求填写一条SQL 命令。 1. 统计供应商的个数？
2.统计每个供应商的供货品种数？
3.列举无商品批号的商品清单。
4.统计有实际售后服务的客户数量
5.统计出货量最大的供应商名称
6.统计有效客户数量
7.统计出：未发生供货的供货商名单
8.统计购买次数大于5次的客户数量
9.统计出与售后商联系最多的客户
10.统计出未发生服务的售后商名单
五、数据模型设计
(1)站在一个现实的手机产品集成商的角度看，有大规模的客户，也有大规模的供应
商，请设计出分析客户对供应商的实时支持度的检测模型。
产生交易客户总数
客户数
目标供应商的有效交易供应商的实时支持度=
请绘制检测中适用的概念模型和逻辑模型，并进行实例分析。
(2)站在一个学生的角度看，有大量的课程，也有大规模的教室，请设计出分析教室
对课程的实时支持度的检测模型。
课程总数
目标教室的授课数量
的实时支持度(%)教室=
请绘制检测中适用的概念模型和逻辑模型，并进行SQL 实例计算。
六、问答题
(1)相比DBMS 而言，数据仓库的优点？ (2)概念模型与逻辑模型的主要区别？ (3)计算机分布式结构的优势因素。 (4)数据聚类与分类存储的功能差异性。
(完整word版)建设数据仓库的八个步骤
大数据技术部 建设数据仓库的八个步骤2017年04月25日编制
建设数据仓库的八个步骤 摘要： 建立数据仓库是一个解决企业问题的过程，业务人员往往不懂如何建立和使用数据仓库，发挥其决策支持的作用；信息部门的人员往往又不懂业务，不知道应该建立哪些决策主题。 关键词：数据仓库元数据 建设数据仓库 建立数据仓库是一个解决企业问题的过程，业务人员往往不懂如何建立和使用数据仓库，发挥其决策支持的作用；信息部门的人员往往又不懂业务，不知道应该建立哪些决策主题，从数据源中抽取哪些数据。因此数据仓库的项目小组应该由业务人员和信息部门的人员共同组成，双方需要相互沟通，协作开发数据仓库。 开发数据仓库的过程包括以下几个步骤。 1.系统分析，确定主题 建立数据仓库的第一个步骤就是通过与业务部门的充分交流，了解建立数据仓库所要解决的问题的真正含义，确定各个主题下的查询分析要求。 业务人员往往会罗列出很多想解决的问题，信息部门的人员应该对这些问题进行分类汇总，确定数据仓库所实现的业务功能。一旦确定问题以后，信息部门的人员还需要确定一下几个因素： ·操作出现的频率，即业务部门每隔多长时间做一次查询分析。 ·在系统中需要保存多久的数据，是一年、两年还是五年、十年。 ·用户查询数据的主要方式，如在时间维度上是按照自然年，还是财政年。 ·用户所能接受的响应时间是多长、是几秒钟，还是几小时。
由于双方在理解上的差异，确定问题和了解问题可能是一个需要多次往复的过程，信息部门的人员可能需要做一些原型演示给业务部门的人员看，以最终确定系统将要实现的功能确实是业务部门所需要的。 2.选择满足数据仓库系统要求的软件平台 在数据仓库所要解决的问题确定后，第二个步骤就是选择合适的软件平台，包括数据库、建模工具、分析工具等。这里有许多因素要考虑，如系统对数据量、响应时间、分析功能的要求等，以下是一些公认的选择标准： ·厂商的背景和支持能力，能否提供全方位的技术支持和咨询服务。 ·数据库对大数据量（TB级）的支持能力。 ·数据库是否支持并行操作。 ·能否提供数据仓库的建模工具，是否支持对元数据的管理。 ·能否提供支持大数据量的数据加载、转换、传输工具（ETT）。 ·能否提供完整的决策支持工具集，满足数据仓库中各类用户的需要。 3.建立数据仓库的逻辑模型 具体步骤如下： （1）确定建立数据仓库逻辑模型的基本方法。 （2）基于主题视图，把主题视图中的数据定义转到逻辑数据模型中。 （3）识别主题之间的关系。
2012下半年系统架构设计师下午试题Ⅱ分析与解答
2012年下半年系统架构设计师下午试题Ⅱ分析与解答 (总分75, 考试时间120分钟) 试题一论基于架构的软件设计方法及应用 基于架构的软件设计(Architecture-Based Software Design，ABSD)方法以构成软件架构的商业、质量和功能需求等要素来驱动整个软件开发过程。ABSD是一个自顶向下，递归细化的软件开发方法，它以软件系统功能的分解为基础，通过选择架构风格实现质量和商业需求，并强调在架构设计过程中使用软件架构模板。采用ABSD方法，设计活动可以从项目总体功能框架明确后就开始，因此该方法特别适用于开发一些不能预先决定所有需求的软件系统，如软件产品线系统或长生命周期系统等，也可为需求不能在短时间内明确的软件项目提供指导。 请围绕“基于架构的软件开发方法及应用”论题，依次从以下三个方面进行论述。 1．概要叙述你参与开发的、采用ABSD方法的软件项目以及你在其中所承担的主要工作。 2．结合项目实际，详细说明采用ABSD方法进行软件开发时，需要经历哪些开发阶段?每个阶段包括哪些主要活动? 3．阐述你在软件开发的过程中都遇到了哪些实际问题及解决方法。 试题一写作要点 一、论文中要具体介绍项目的背景与总体需求、系统所采用的技术路线以及你所承担的实际工作。 二、采用ABSD方法进行软件开发时，需要经历架构需求、架构设计、架构文档化、架构复审、架构实现和架构演化六个阶段。 1．架构需求阶段需要明确用户对目标软件系统在功能、行为、性能、设计约束等方面的期望。其主要活动包括需求获取、标识构件和架构评审。 (1)需求获取活动需要定义开发人员必须实现的软件功能，使得用户能够完成他们的任务，从而满足功能需求。与此同时，还要获得软件质量属性，满足一些非功能性需求。 (2)标识构件活动首先需要获得系统的基本结构，然后对基本结构进行分组，最后将基本结构进行打包成构件。 (3)架构需求评审活动组织一个由系统涉众(用户、系统分析师、架构师、设计实现人员等)组成的小组，对架构需求及相关构件进行审查。审查的主要内容包括所获取的需求是否真实反映了用户需求，构件合并是否合理等。 2．架构设计阶段是一个迭代过程，利用架构需求生成并调整架构决策。主要活动包括提出架构模型、将己标识的构件映射到架构中、分析构件之间的相互作用、产生系统架构和架构设计评审。 3．架构文档化的主要活动是对架构设计进行分析与整理，生成架构规格说明书和测试架构需求的质量设计说明书。 4．在一个主版本的软件架构分析之后，需要安排一次由外部人员(客户代表和领域专家)参加的架构复审。架构复审需要评价架构是否能够满足需求，质量属性需求是否
高级开发人员架构师面试题
高级开发人员架构师面试题 此文中所提到的面试题是园子中Tony Qu兄弟翻译过来的，特此感谢高级开发人员/架构师1 DateTime.ParsemyString 有问题，当myString丌能满足时间格式要求的时候，会引发异常，建议使用DateTime.TryParse 2PDB PDB是用于保存调试和项目状态信息的文件，在debug 的时候将产生pdb文件，调试的时候应该放在和对应应用程序集相同目录。3 cyclomatic complexity 丌知道，望指教？4 lock private static object instrace static object lockedObj new object public static void LockTest if instrace null lock lockedObj if instance null instance new object 5 FullTrustGACassemblyFullTrust FullTrust完全信任。放入GAC中的Assembly是否FullTrust我的理解丌是。我理解FullTrust是可以通过代码设定的6 可以更加灵活的设置对代码的访问权限，实现代码级保护。？这点丌是特清楚，有明白的给讲解下7 gacutil /l find /i Corillian 全局程序集缓存中如果有Corillian就更新该程序集，没有就安装8 sn -t foo.dll 显示程序集foo.dll的公钥标记9 DCOM135 135端口，因为DCOM的端口号是随机分配的，默认情况下，会分配1024以上的端口号，所以默认情况下DCOM丌能穿越防火墙。因为根本丌晓得开哪个端口。但有解决办法可以使DCOM分配的端口号固定，有关内容我在https://www.360docs.net/doc/1b3394256.html,/jillzhang/archive/2008/02/20/1075057.html 有过一些描述。135是远程过程调用RPC的默认端口10OOPSOA 我想OOP和SOA应该没有对比性吧。OOP是一种编程模型，强调将复杂的逻辑分解出小的模块，特性是继承，封装和多态。而SOA是一个技术框架，技术框架和编程模型应该说丌是一码事吧？SOA的思想是将业务逻辑封装成服务戒者中间件提供给应用程序来调用，当然其组件化思想是继承和发扬了OOP的优点。11 XmlSerializerACL 我只知道XmlSerializer是将对象的属性和字段进行序列化和反序列化的，序列化成为xml数据，反序列化再将xml转换成对象。应该至少需要ACL权限中的读权限. 12catchException 原因可能有两点：1）try..catch在出现异常的时候影响性能2）应该捕获更具体得异常，比如IOExeceptionOutOfMemoryException等13Debug.WriteTrace.Write Debug.Write是调试的时候向跟踪窗口输出信息。当编译模式为debug的时候才有效，为release的时候Debug.Write在编译的时候会忽略而Trace则是在debug和release两种模式下均可以向跟踪窗口输出信息。14Debug BuildRelease Build Debug会产生pdb文件，release 丌会。Debug用于开发时的调试，丌能要于部署，而release用于部署.debug编译一些特殊代码，比如IFDEBUG Debug.Write等，而Release则会将那些特殊标记省略15JITassembly 方法，道理很简单，因为对于一次运行，很可能只用到一个程序集中极少数类型和对象，而大部分可能并丌会被使用，此时CLR傻乎乎的给整个程序集都给Compile了，CLR丌是傻疯了么16 抽象类能有具体实现，而接口只定义行为规范，丌能有具体实现。一个类只能继承一个父类，但能实现多个接口。17a.Equalsba b 丌一样。多数情况下，a.Equalsb表示a 不b一致，ab表示a不b的值相等。也可以有具体重载（多谢Jeffrey Zhao 的指正）18 对象一致是指两个对象是同一个对象，引用相同。而对象相等是指两个对象的值相同，但引用丌一定相同https://www.360docs.net/doc/1b3394256.html,deep copy 实现IClonable接口20IClonable IClonable方法是实现深度复制的接口，实现它应该能深度复制一个对象出来。深度复制的特征的调用对象的构造方法，创建新的对象，包括创建对象中嵌套的引用对象的新实例。而Shadow复制则丌同，是浅表复制，丌重新创建新实例。浅表复制的实现是Object.MemberWiseClone. public class Name public string FirstName public string LastName public class Person:ICloneable public Name PersonName public string Email /// /// Deep Copy的例子/// /// public Object Clone Person p new Person p.Email this.Email p.PersonName new Name p.PersonName.FirstName this.PersonName.FirstName https://www.360docs.net/doc/1b3394256.html,stName https://www.360docs.net/doc/1b3394256.html,stName return p public void ChangLastNamestring lastName https://www.360docs.net/doc/1b3394256.html,stName lastName public static void Main Person p new Person p.PersonName new Name https://www.360docs.net/doc/1b3394256.html,stName jill
2011年软考系统架构设计师(高级)学习笔记
2011年软考系统架构设计师学习笔记第一章 1.1.1 系统架构师的概念 现代信息系统“架构”三要素：构件、模式、规划;规划是架构的基石，也是这三个贡献中最重要的。 架构本质上存在两个层次：概念层，物理层。 1.2.1 系统架构师的定义 负责理解、管理并最终确认和评估非功能性系统需求，给出开发规范，搭建系统实现的核心架构，对整个软件架构、关键构建、接口进行总体设计并澄清关键技术细节。 主要着眼于系统的“技术实现”，同时还要考虑系统的“组织协调”。 要对所属的开发团队有足够的了解，能够评估该开发团队实现特定的功能需求目标和资源代价。 1.2.2 系统架构师技术素质 对软件工程标准规范有良好的把握。 1.2.3 系统架构师管理素质 系统架构师是一个高效工作团队的创建者，必须尽可能使所有团队成员的想法一致，为一个项目订制清晰的、强制性的、有元件的目标作为整个团队的动力; 必须提供特定的方法和模型作为理想的技术解决方案; 必须避免犹豫，必须具备及时解决技术问题的紧迫感和自信心。 1.2.4 系统架构师与其他团队角色的协调 系统分析师，需求分析，技术实现 系统架构师，系统设计，基于环境和资源的系统技术实现 项目管理师，资源组织，资源实现 由于职位角度出发产生冲突制约，不可能很好地给出开发规范，搭建系统实现的核心架构，并澄清技术细节，扫清主要难点。 所以把架构师定位在项目管理师与系统分析师之间，为团队规划清晰的目标。 对于大型企业或项目，如果一人承担多个角色，往往容易发生顾此失彼的现象。 1.3 系统架构师知识结构 需要从大量互相冲突的系统方法和工具中区分出哪些是有效的，那些是无效的。 1.4 从开发人员到架构师 总结自己的架构模式，深入行业总结规律。 几天的培训不太可能培养出合格的软件架构师，厂商的培训和认证，最终目的是培养自己的市场，培养一批忠诚的用户或产品代言人，而不是为中国培养软件架构师。
数据仓库实例
计算机
王莹
本例采用的是SQl Server2005所提供的商业智能服务和工 具，主要包括Analysis Services(分析服务)， Integration Services(集成服务),Reporting Services(集成服务)和Bussiness Intelligence Developer Studio(BIDS)。
分析服务(Analysis Services) SQL Server 分析服务（SSAS）是一个用于分析数据仓库中数据的工 具，它包括了OLAP和数据挖掘工具。在SQL Server 2005数据库系统 中，Analysis Services工具以服务器的方式为用户提供管理多维数 据立方体的服务。Analysis Services可以把数据仓库中的数据组织 起来，经过预先的聚集运算，加入到多维立方体中（即建立立方 体），然后对复杂的分析型访问做出迅速的回答。
集成服务(Integration Services) SQL Server 集成服务（SSIS）被定位成一个能生成高性能数据集成解决 方案(包括数据仓库中数据的提取、转换和加载（ETL））的平台。其集 成的含义主要就是指把ETL集成在一起。SSIS通过一个统一的环境向用户 提供了数据转换服务（DTS）所能提供的所有功能，并且大大减少了用户 花在编写程序和脚本上的精力和时间。 SSIS的基本功能包括：
? ? ? ? ? ? 合并来自异类数据源中的数据 填充数据仓库和数据集市 整理数据和将数据标准化 精确和模糊的查找功能 将商业智能置入数据转换过程 使管理功能和数据加载自动化
(完整版)架构师面试问题指导性框架
架构师面试问题指导性框架 1. Java基础问题 (3) 1.1. 所有Java类的基类是什么？ (3) 1.2. Object类中有哪些方法？（说出三个） (3) 1.3. equals和==的差别？ (3) 1.4. hashCode的作用 (3) 1.5. hashCode和equals方法的关系 (3) 1.6. 如何停止一个线程？ (3) 1.7. Thread.setDeamon()的含义？ (5) 1.8. ClassLoader的功能和工作模式？ (5) 1.9. 列举几个Java Collection类库中的常用类，试简述其类结构。 (6) 1.10. Input/OutputStream和Reader/Writer有何区别？何为字符，何为字节？ (6) 1.11. 如何在字符流和字节流之间转换？ (6) 1.12. GC垃圾收集是什么意思？怎样的对象会被收集？ (6) 2. JavaEE的问题 (6) 2.1. Serlvet/JSP相关 (6) 2.1.1. JSP的工作原理 (6) 2.1.2. Servlet中的session工作原理 (6) 2.1.3. WEB层如何实现Cluster (7) 2.2. EJB相关 (7) 2.2.1. EJB的类型 (7) 2.2.2. EJB的工作原理 (7) 2.2.3. EJB的应用领域 (7) 2.3. JMS相关 (7) 2.3.1. JMS的模式 (7) 2.4. JDBC/JTA/JTS相关 (7) 2.4.1. 用JDBC怎样从数据库中查询一条记录？ (7) 2.4.2. Transaction有哪几种隔离级别？（Isolation Level） (7) 2.4.3. Global transaction的原理是什么？ (7) 2.5. WebService相关 (8) 2.5.1. 简述WebService是怎么实现的？ (8) 2.6. Ant/maven的知识 (8) 2.6.1. 用过ant或maven吗？它们是什么？有什么特点（或好处）？ (8) 3. 开源软件的问题 (8) 3.1. Spring相关 (8) 3.1.1. Spring的核心理念是什么？ (8) 3.2. iBatis/hibernate相关 (8) 3.2.1. 简介hibernate和（或）ibatis，及它们的异同、优缺点。 (8) 3.3. 其它软件 (8) 3.3.1. Web层框架 (8) 3.3.2. 数据层框架 (8) 3.3.3. 普通工具类 (8) 3.3.4. 测试框架 (8) 3.3.5. Service框架 (8) 3.3.6. (9) 4. OOA/OOD (9) 4.1. OOD的原则 (9)
ETL面试题
一、分析 1．什么是逻辑数据映射？它对ETL项目组的作用是什么？ What is a logical data mapping and what does it mean to the ETL team? 答： 逻辑数据映射（Logical Data Map）用来描述源系统的数据定义、目标数据仓库的模型以及将源系统的数据转换到数据仓库中需要做操作和处理方式的说明文档，通常以表格或Excel 的格式保存如下的信息： 目标表名： 目标列名： 目标表类型：注明是事实表、维度表或支架维度表。 SCD类型：对于维度表而言。三种SCD（Slowly Changing Dimension）技术 SCD1直接修改原维表信息，不保存任何维历史信息。 SCD2创建新的记录而不删除或修改原有维信息。可通过为每条记录设定过期时间、生效时间两个字段来区分各历史记录和当前记录（历史记录的过期时间均早于当前记录的生效时间）。 SCD3在维表中定义历史信息字段，只保存有限的历史信息（此技术很少应用） 源数据库名：源数据库的实例名，或者连接字符串。 源表名： 源列名： 转换方法：需要对源数据做的操作，如Sum(amount)等。 逻辑数据映射应该贯穿数据迁移项目的始终，在其中说明了数据迁移中的ETL策略。在进行物理数据映射前进行逻辑数据映射对ETL项目组是重要的，它起着元数据的作用。项目中最好选择能生成逻辑数据映射的数据迁移工具。 -----------------------------补充： 逻辑数据映射分为两种: 1: 模型映射: 从源模型到DW目标模型之间的映射类型有：
一对一：一个源模型的数据实体只对应一个目标模型的数据实体。如果源类型与目标类型一致，则直接映射。如果两者间类型不一样，则必须经过转换映射。 一对多：一个源模型的数据实体只对应多个目标模型的数据实体。在同一个数据存储空间，常常出现会一个源实体拆分为多个目标实体的情况下。在不同的存储空间中，结果会对应到不同的存储空间的实体。 一对零：一个源模型的数据实体没有与目标模型的数据实体有对应，它不在我们处理的计划范围之内。 零对一：一个目标模型的数据实体没有与任何一个源数据实体对应起来。例如只是根据设计考虑，时间维表等。 多对一：多个源模型的数据实体只对应一个目标模型的数据实体。 多对多：多个源模型的数据实体对应多个目标模型的数据实体。 2: 属性映射 一对一：源实体的一个数据属性列只对应目标实体的一个数据属性列。如果源类型与目标类型一致，则直接映射。如果两者间类型不一样，则必须经过转换映射。 一对多：源实体的一个数据属性列只对应目标实体的多个数据属性列。在同一个实体中，常常出现会一个源属性列拆分为目标的多个属性列情况。在不同实体中，结果会对应到不同的实体的属列。 一对零：一个源实体的数据属性列没有与目标实体的数据属性列有对应，它不在我们处理的计划范围之内。 零对一：一个目标实体的数据属性列没有与任何一个源数据属性列对应起来。例如只是根据设计考虑，维表和事实表中的时间戳属性，代理健等。 多对一：源实体的多个数据属性列只对应目标实体的一个数据属性列。 多对多：源实体的多个数据属性列对应目标实体的多个数据属性列。 作用: 1 为开发者传送更为清晰的数据流信息。映射关系包括有关数据在存储到DW前所经历的各种变化的信息，对于开发过程中数据的追踪审查过程非常重要。 2 把ETL过程的信息归纳为元数据，将数据源结构，目标结构，数据转换规则，映射关系，数据的上下文等元数据保存在存储知识库中，为元数据消费者提供很好的参考信息，追踪数据来源与转换信息，有助于设计人员理解系统环境变化所造成的影响；
十大架构师谈服务器选型 ——证券行业篇
十大架构师谈服务器选型——证券行业篇 证券企业一般在全国范围内经营业务，网络庞大、结构复杂，典型业务模式有柜台交易、自助委托、电话委托、网上委托等。各证券营业部和总部通过网络将交易所、证券公司与交易者三方连接在一起，共同完成证券交易，并实现行情、交易、结算、办公等各环节的自动化。证券企业网络一般由四部分组成：总部网络、营业部网络、银证交易系统和网站系统。 证券集中业务体系解决方案 作为支撑业务运转的基础平台，证券公司总部、区域总部成为证券营业业务的处理核心，证券营业部、服务部、支持部等分支机构成为业务服务单位。 营业部、服务部等分支机构实现了各分支机构的基本工作职能，它侧重于本地IT系统建设，其通信服务功能模块只起到辅助作用。 利用集中式交易系统, 具有相当规模的证券公司将远距离控制多个分支机构和为远程 大户提供服务，相应业务范围和工作模式都会有很大改变，因此需要一个强有力的IT体系解决方案来支撑证券业务集中业务和其他相关增值业 证券集中系统解决方案 采用集中交易模式，券商总部就成为整个交易体系的核心，所有分支机构的交易请求等业务均由券商总部中心进行处理，各分支机构只保留行情服务系统、客户服务接入平台、通讯中间层等前端处理平台；这样有利于统一公司对外服务形象和服务品牌，符合数据仓库、CRM的建设发展趋势，还可以大大降低运营成本。实行集中交易后，总部的重要性显而易见，在使用集中式交易模式，在建设的同时建立至少一个灾难备份中心，起到数据备份和灾难恢复的重要作用。 采取集中交易模式后，整个网络体系结构由两个中心（数据中心和灾备中心）、分支机构等构成，所有分支机构直接接入总部中心。 证券集中交易解决方案 根据券商集中交易的规模（营业部数量、股民数量等），数据中心和灾备中心的主机和数据库系统选型：
数据架构师岗位职责
数据架构师岗位职责 篇一：数据仓库架构师的岗位职责和岗位要求】 数据仓库架构师的岗位职责和岗位要求 根据网络招聘的资料合成的,不过好像听起来好像和项目经理的角色区别不大,呵呵!而且好像都是要全能的上将![@more@] 岗位职责 1. 制定数据仓库建设方案 2. 数据仓库的设计和开发 3. 数据仓库应用方案设计和推广 岗位要求 1 、熟悉大型企业商业智能整体运作模式和系统框架，深刻理解商业智能对业务运营的杠杆作用，能够应用bi 工具指导和帮助业务过程的改进。 2、5 年以上oracle 或者sqlserver 数据库管理经验，熟练使用unix 和linux ，深刻理解数据仓库应用设计原理和实践； 3 、精通数据库索引和sql 语句的优化，和服务器的性能参数调整，有perl, 4 、熟练一种以上主流etl 工具和bi 工具,如informatica,owb,dts 5 、能根据业务需求设计数据仓库模型，有3 年以上数据仓库开发实施经验，掌握多种数据仓库开发，多维分析相关技术和olap 前端展现工具； 6 、有相关行业数据分析经验者及互联网点击流数据分析经验者优先；有数据挖掘应用和开发经验优先； 7 、强烈责任心，开放的性格，良好的沟通能力；较强的分析问题、解决问题能力，良好的沟通能力、团队精神。 8 、熟悉erwin 或powerdesigner 建模工具； 9 、有一个以上企业级数据仓库项目设计经验，精通数据仓库架构，熟悉数据仓库项目的实施流程； 【篇二：数据架构师岗位职责】 1. 制定面向产品的数据设计规范和流程，制定数据设计所需的各种文档模板； 2. 负责数据仓库建模、数据库优化、数据部署，数据抽取等etl 的设计，编写专业的系统设计文档； 3. 对于it 系统应对大数据量和大并发所要求的性能指标从数据模型和部署等方面给出设计和持续的优化支持； 4. 参与产品架构设计文档和详细设计文档的评审； 5. 完成上级领导安排的其他任务。
软件工程师面试题(含答案)
一、你对MVC的理解，MVC有什么优缺点？结合Struts，说明在一个Web应用如何去使用？ 答： MVC设计模式（应用观察者模式的框架模式） M: Model(Business process layer)，模型，操作数据的业务处理层,并独立于表现层(Independent of presentation)。 V: View(Presentation layer)，视图，通过客户端数据类型显示数据,并回显模型层的执行结果。C: Controller(Control layer)，控制器，也就是视图层和模型层桥梁，控制数据的流向，接受视图层发出的事件，并重绘视图 MVC框架的一种实现模型 模型二(Servlet-centric)： JSP+Servlet+JavaBean，以控制为核心，JSP只负责显示和收集数据，Sevlet，连接视图和模型，将视图层数据，发送给模型层，JavaBean，分为业务类和数据实体，业务类处理业务数据，数据实体，承载数据，基本上大多数的项目都是使用这种MVC的实现模式。StrutsMVC框架(Web application frameworks) Struts是使用MVC的实现模式二来实现的，也就是以控制器为核心。 Struts提供了一些组件使用MVC开发应用程序： Model：Struts没有提供model类。这个商业逻辑必须由Web应用程序的开发者以JavaBean 或EJB的形式提供 View：Struts提供了action form创建form bean, 用于在controller和view间传输数据。此外，Struts提供了自定义JSP标签库，辅助开发者用JSP创建交互式的以表单为基础的应用程序，应用程序资源文件保留了一些文本常量和错误消息，可转变为其它语言，可用于JSP中。Controller：Struts提供了一个核心的控制器ActionServlet，通过这个核心的控制器来调用其他用户注册了的自定义的控制器Action，自定义Action需要符合Struts的自定义Action规范，还需要在struts-config.xml的特定配置文件中进行配置，接收JSP输入字段形成Action form，然后调用一个Action控制器。Action控制器中提供了model的逻辑接口。 二、什么是WebService？ 答： WebService是一个SOA（面向服务的编程）的架构，它是不依赖于语言，不依赖于平台，可以实现不同的语言间的相互调用，通过Internet进行基于Http协议的网络应用间的交互。 WebService实现不同语言间的调用，是依托于一个标准，webservice是需要遵守WSDL （web服务定义语言）/SOAP（简单请求协议）规范的。 WebService=WSDL+SOAP+UDDI（webservice的注册） Soap是由Soap的part和0个或多个附件组成，一般只有part，在part中有Envelope和Body。 Web Service是通过提供标准的协议和接口，可以让不同的程序集成的一种SOA架构。Web Service的优点 (1) 可以让异构的程序相互访问（跨平台） (2) 松耦合 (3) 基于标准协议（通用语言，允许其他程序访问） Web Service的基本原理 (1) Service Provider采用WSDL描述服务 (2) Service Provider 采用UDDI将服务的描述文件发布到UDDI服务器（Register server）
软件工程师面试题含答案
软件工程师面试题含答案
一、你对MVC的理解，MVC有什么优缺点？结合Struts，说明在一个Web应用如何去使用？答： MVC设计模式（应用观察者模式的框架模式）M: Model(Business process layer)，模型，操作数据的业务处理层,并独立于表现层(Independent of presentation)。 V: View(Presentation layer)，视图，经过客户端数据类型显示数据,并回显模型层的执行结果。C: Controller(Control layer)，控制器，也就是视图层和模型层桥梁，控制数据的流向，接受视图层发出的事件，并重绘视图 MVC框架的一种实现模型 模型二(Servlet-centric)： JSP+Servlet+JavaBean，以控制为核心，JSP只负责显示和收集数据，Sevlet，连接视图和模型，将视图层数据，发送给模型层，JavaBean，分为业务类和数据实体，业务类处理业务数据，数据实体，承载数据，基本上大多数的项目都是使用这种MVC的实现模式。
StrutsMVC框架(Web application frameworks) Struts是使用MVC的实现模式二来实现的，也就是以控制器为核心。 Struts提供了一些组件使用MVC开发应用程序： Model：Struts没有提供model类。这个商业逻辑必须由Web应用程序的开发者以JavaBean 或EJB的形式提供 View：Struts提供了action form创立form bean, 用于在controller和view间传输数据。另外，Struts提供了自定义JSP标签库，辅助开发者用JSP创立交互式的以表单为基础的应用程序，应用程序资源文件保留了一些文本常量和错误消息，可转变为其它语言，可用于JSP中。 Controller：Struts提供了一个核心的控制器ActionServlet，经过这个核心的控制器来调用其它用户注册了的自定义的控制器Action，自定义Action需要符合Struts的自定义Action规范，
2016年下半年软件水平考试(高级)系统架构师《案例分析》下午真题及答案
2016年下半年软件水平考试（高级）系统架构师 《案例分析》下午真题 (总分000, 考试时间90分钟) 1. 阅读以下关于软件架构设计的叙述，在答题纸上回答问题1至问题3。 [说明]某软件公司为某品牌手机厂商开发一套手机应用程序集成开发环境，以提高开发手机应用程序的质量和效率。在项目之初，公司的系统分析师对该集成开发环境的需求进行了调研和分析，具体描述如下：1．需要同时支持该厂商自行定义的应用编程语言的编辑、界面可视化设计、编译、调试等模块，这些模块产生的模型或数据格式差异较大，集成环境应提供数据集成能力。集成开发环境还要支持以适配方式集成公司现有的应用模拟器工具。2．经过调研，手机应用开发人员更倾向于使用Windows系统，因此集成开发环境的界面需要与Windows平台上的主流开发工具的界面风格保持一致。3．支持相关开发数据在云端存储，需要保证在云端存储数据的机密性和完整性。4．支持用户通过配置界面依据自己的喜好修改界面风格，包括颜色、布局、代码高亮方式等，配置完成后无须重启环境。5．支持不同模型的自动转换。在初始需求中定义的机器性能条件下，对于一个包含50个对象的设计模型，将其转换为相应代码框架时所消耗时间不超过5秒。6．能够连续运行的时间不小于240小时，意外退出后能够在10秒之内自动重启。7．集成开发环境具有模块化结构，支持以模块为单位进行 调试、测试与发布。8．支持应用开发过程中的代码调试功能：开发人员可以设置断点，启动调试，编辑器可以自动卷屏并命中断点，能通过变量监视器查看当前变量取值。在对需求进行分析后，公司的架构师小张查阅了相关的资料，认为该集成开发环境应该采用管道一过滤器(Pipe-Filter)的架构风格，公司的资深架构师王工在仔细分析后，认为应该采用数据仓储(Data Repository)的架构风格。公司经过评审，最终采用了王工的方案。 1.[问题1]识别软件架构质量属性是进行架构设计的重要步骤。请分析题干中的需求描述， 填写表1—1中(1)～(5)处的空白。 该问题分值: 2 答案:正确答案：(1)f(2)性能(3)d(4)g(5)b 2.[问题2]请在阅读题干需求描述的基础上，从交互方式、数据结构、控制结构和扩展方法4 个方面对两种架构风格进行比较，填写表1—2中(1)～(4)处的空白。 该问题分值: 2 答案:正确答案：(1)工具之间无直接交互，通过数据仓储间接交互(2)流式数据(3)数据驱动(4)
混合数据仓库模型
构建混合数据仓库模型 关系模型与维度模型通常单独使用，但是根据需要，也可将它们混合到一起使用。为此，首先要建立一个规范化的关系模型，然后添加维度结构(主要在物理层上)。结果得到一个兼具两种父级模型优势的单个模型：它表示的实体与关系具有传统关系模型的精度，它按维度处理已过滤的、聚合事实的查询的速度与传统维度模型的速度相差无几。 现实经历促使我进行了这样的分析：在三个独立的数据仓库项目中，我分别担任过程序员、架构师和项目经理。在这些项目中，我发现了一种数据/数据库行为一致的模式，这种行为模式使得维度模型与关系模型混合构成的模型较两者中任何一种单一的模型更适合使用。 本文讨论混合设计，并提供功能齐全的参考实施。系统在 Oracle 数据库10g 上运行，它包括完成下列任务所需的所有代码：构建数据库模式、生成示例数据、将示例数据加载到数据库模式中、构建索引和物化视图、运行示例查询、捕获运行时间以及提供运行时间的统计信息。 混合模型并不是通用型解决方案。许多项目最好使用一种传统模型或者单独使用两种模型(模型间有馈给)。但是，如果要创建一个既能以规范化格式存储数据又能以良好的性能运行聚合查询的单一数据库，那么混合模型便是一种值得考虑的设计模式。 示例业务领域 示例业务领域是在保险业内，并使用以下实体： 用于分析系统性能的示例业务问题与现实中的有些类似，但也包含一些极端的行为，例如：扫描事实表的多个行、检索很小一部分事实行、限制为顶部表、限制为每个表、限制为底部表等等。这些是业务用户针对维度模型提及的问题类型，并非针对关系模型提及的常见问题类型。这里不讨论关系模型的问题，因为假设对于关系特性问题(例如“显示该保险单上的所有车辆”)，关系模型的性能优于维度模型。本次分析中使用的问题如下：
《数据库系统概论》考研王珊版考研真题2021考研
《数据库系统概论》考研王珊版考研真题2021考研第一部分名校考研真题 说明：我们从指定王珊《数据库系统概论》（第5版）为考研参考书目的名校历年考研真题以及相关教辅习题中挑选具有代表性的真题，并对其进行了详细的解答。通过这一部分的练习，可以帮助学员巩固基础知识、夯实专业基础，从而做到全方位备考。 一、选择题 1按照数据库应用系统生命周期模型，在开发某数据库应用系统时，对系统采用的软硬件及技术方案等作出合理的评估并提出选择建议的工作属于（）。A．规划与分析阶段的系统规划与定义 B．规划与分析阶段的可行性分析 C．需求分析阶段的业务规则需求分析 D．系统设计阶段的总体设计 【答案】B查看答案 【解析】技术可行性分析是指对系统采用的软硬件及技术方案等作出合理的评估并提出选择建议，是根据用户提出的系统功能、性能及实现系统的各项约束条件来进行分析的，属于规划与分析阶段。 2关于数据库应用系统的需求分析工作，下列说法正确的是（）。 A．通过需求分析过程，需要确定出整个应用系统的目标、任务和系统的范围说明B．在需求分析阶段，系统需求分析员要与用户充分沟通，并做出各类用户视图C．数据需求分析的主要工作是要辩识出数据处理中的数据处理流程
D．数据操作响应时间、系统吞吐量、最大并发用户数都是性能需求分析的重要指标 【答案】D查看答案 【解析】数据库应用系统的需求分析工作主要包括：①数据及数据处理需求分析；②业务需求分析；③性能、存储、安全、备份、恢复等方面的需求。其中，性能需求分析指标主要包括：①数据操作响应时间；②系统吞吐量；③最大并发用户数。 3下列用于数据库概念设计的方法是（）。 A．DFD方法和IDEFIX方法 B．E-R方法和IDEF0方法 C．E-R方法和IDEFIX方法 D．DFD方法和IDEF0方法 【答案】C查看答案 【解析】概念设计指将需求分析得到的用户需求抽象为信息结构的过程。常见的用户数据库概念设计方法包括E-R方法和IDEFIX方法等。 4关于数据库概念设计阶段的工作目标，下列说法错误的是（）。 A．定义和描述应用系统设计的信息结构和范围 B．定义和描述应用系统中数据的属性特征和数据之间的联系 C．描述应用系统的数据需求 D．描述需要存储的记录及其数量 【答案】D查看答案
Java系统架构师【面试题】
Java系统分析/架构师面试题 【专业知识相关】 1、谈谈对OOP、IOC、AOP的设计理念的理解； 2、谈谈对主流的J2EE框架（Spring、Struts、Ibatis、Hibernate等）；这 些框架的局限性在哪儿？在何种情况下会不适合用这些框架？ 3、关于J2EE方面开发方面，说出前、后端的设计模型； （提示：比如前端的MVC框架，Axis，Ext，JQuery，Flex等，后端的Ejb，Spring，IOC，AOP，JMS，JNDI，RMI，以及负载均衡等） 4、什么是SOA，ROA？谈谈两种技术的原理及适用场景； 5、说说JVM原理，内存泄露与溢出的区别，何时产生内存泄露？ 6、谈谈JAVA通信方面相关知识，以及大项目之间通信方案； 【软件架构、服务器、中间件相关】 7、谈谈架构师的职责有哪些？ 8、软件设计领域，有哪些设计模式，你常用的几种设计模式；各个设计模式 有哪些优缺点，适应哪些场景； 9、谈谈你日常用的几种WEB服务器、中间件的相关特性及优缺点； 10、如果要设计一个搜索引擎，像Google那样只有两个页面，要求性能最大 化，Web方面应该如何设计？（不需要考虑搜索的逻辑） 11、企业级应用有哪些特殊要求？在何种情况下我们不需要考虑这些要求？ 12、谈谈你现在做技术最大的困惑是什么？ 13、描述一个你感觉最成功的一次架构案例? 14、怎么做到系统整合? （提示：A、通过代码的整合方式，使用相同的数据库。B、通过SSO方式，可以是异构数据库.） 15、浅谈一下负载均衡的原理? 16、怎么处理权限分配?有几种权限分配模型?（提示：目前流行的三种： A、自主型访问控制； B、强制型访问控制； C、基于角色的访问控制RBAC）【数据库方面】
大数据架构师岗位的主要职责概述
大数据架构师岗位的主要职责概述 大数据架构师需要负责协助策略和算法工作,保障数据挖掘建模和工程化。以下是小编整理的大数据架构师岗位的主要职责概述。 大数据架构师岗位的主要职责概述1 职责： 1.参与公司数据平台系统规划和架构工作，主导系统的架构设计和项目实施，确保项目质量和关键性能指标达成; 2.统筹和推进制造工厂内部数据系统的构建，搭建不同****数据之间的逻辑关系，能够为公司运营诊断、运营效率提升提供数据支持; 3.负责数据系统需求对接、各信息化系统数据对接、软件供应商管理工作 5.根据现状制定总体的数据治理方案及数据体系建立，包括数据采集、接入、分类、开发标准和规范，制定全链路数据治理方案;深入挖掘公司数据业务，超强的数据业务感知力，挖掘数据价值，推动数据变现场景的落地，为决策及业务赋能;
6.定义不同的数据应用场景，推动公司的数据可视化工作，提升公司数据分析效率和数据价值转化。 任职要求： 1.本科以上学历，8年以上软件行业从业经验，5年以上大数据架构设计经验，熟悉BI平台、大数据系统相关技术架构及技术标准; 2.熟悉数据仓库、熟悉数据集市，了解数据挖掘、数据抽取、数据清洗、数据建模相关技术; 3.熟悉大数据相关技术：Hadoop、Hive、Hbase、Storm、Flink、Spark、Kafka、RabbitMQ; 4.熟悉制造企业信息化系统及相关数据库技术; 5.具备大数据平台、计算存储平台、可视化开发平台经验，具有制造企业大数据系统项目开发或实施经验优先; 6.对数据敏感，具备优秀的业务需求分析和报告展示能力，具备制造企业数据分析和数据洞察、大数据系统的架构设计能力，了解主流的报表工具或新兴的前端报表工具; 7.有较强的沟通和组织协调能力，具备结果导向思维，有相关项目管理经验优先。 大数据架构师岗位的主要职责概述2
数据仓库成功案例
数据仓库成功案例３ 兴业证券数据仓库系统 编者按：兴业证券选择了Sybase的数据仓库解决方案，以帮助其成功地实现交易数据的集中处理和分析。该系统的应用采用三层式数据仓库结构，使系统具有优越的处理性能、高度可扩展性、开放性、灵活性和可管理性。 用户背景 兴业证券作为一家综合类专业证券公司、中国证券业协会理事单位，在福建省乃至全国的证券界都具有一定的影响力。公司总部设在福州，在上海也设立了区域管理总部，已经初步构建了辐射全国的业务经营机构网络。在中国加入WTO之后，兴业证券也面临着新的挑战和机遇。如何将现有的优势充分发挥并创造新的竞争优势，从而加强其在证券行业的领先地位，是兴业证券面临的重要课题。 从2001年7月开始，Sybase公司与兴业证券合作，共同开发兴业证券数据仓库和决策支持系统，帮助兴业证券总部实现对营业部集中管理和数据集中基础上的决策支持。 系统目标 兴业证券对现有信息系统的要求： * 对各个营业部交易数据汇总整合信息来源，从而提高决策信息的及时性、准确性、全局性、一致性； * 建立全面、统一、科学的日常决策分析报表/查询系统； * 深层次的信息加工，分析客户、市场、风险等主题项目，充分利用兴业证券的丰富数据； * 系统必须保证系统中每一条信息的安全性，对信息的访问进行安全性控制，这样才能充分保证信息不会泄漏，以维护证券市场的秩序； * 建立具有高处理能力和高扩展能力的数据仓库平台，以适应管理和处理日益庞大的市场数据的要求。 数据仓库系统将帮助兴业证券充分利用信息资源，为兴业证券提供坚实的信息基础以迎接上述的业务挑战和机遇。 建立数据仓库系统的目标： * 为各业务部门、兴业证券的领导层提供有效的决策管理信息支持，提高业务效率、