海事监管数据信息分析与应用
浅谈海事监管数据信息分析与应用摘要信息技术网络的发展为海事监管赋予了新的定义，在新形势下对于数据的要求是及时、准确、全面、可靠。但是，在实际上这些数据的作用并没有得到充分发挥，这导致了海事监管质量的降低。本文将就如何提高海事监管数据质量、拓展数据综合应用的对策与方法等问题做出了一些探讨。
关键词海事监管；数据分析；管理体制
中图分类号tp392 文献标识码a 文章编号 1674-6708（2011）39-0084-02
1 海事数据信息现状
现在基于计算机和网络技术之下的电子政务的发展迅速，显然其快速发展也为海事系统体系化建设，为海事部门依托计算机网络先进技术手段，运用技量经济学和统计学分析原理，对数量庞大且瞬息万变的监管数据拓展分析运用，探求监管与服务的互动关系。但是，当前海事监管数据的利用率不高。
就目前的形势分析，我国海事监管系统目前尚未完全确立，传统的海事监管系统面对新形势下电子政务的发展没有做出及时系统的改观，这是目前我国海事监管系统的一个局限。信息化管理和体系化建设对于我国海事监管工作无疑是至关重要的。从信息采集正确性、数据应用以及数据综合衔接这3个方面进行分析。在这3个方面里，信息采集的正确与否至关重要，因为后期的两个环节都
企业信息化建设思考
企业信息化建设思考 2007-06-19 17:20:56 大中小 标签：企业信息化建设 经过二十余年风风火火的企业信息化建设，各具特色的以计算机技术为代表的信息管理应用系统出现在企业管理各个领域，成为企业脱离不开的管理平台，构成日常管理的重要组成部分，但当市场在推动企业信息化不断向深度和广度延伸时，信息系统具有的功能不足、应用滞后的矛盾越来越突出，有时甚至拖了管理创新的后腿，受到了企业的质疑。如何解决目前存在的问题，寻找信息化建设的准确定位，抓主要矛盾，为未来信息化建设拓展更大的发展空间，现将本人多年困惑不解的所思所想写上纸面，与大家共同探讨。 员工信息化素质的提高落后于信息化需求的提高 企业信息化建设是通过信息项目建设完成的，决定项目效果好坏的重要因素是项目功能，决定项目功能好坏的重要因素是信息化需求挖掘深度，而信息系统软件设计是根据信息化需求分析结果完成的。按照信息化建设一般性规则，企业都要制订一部信息化发展规划，由于发展规划本身宏观性很强，那么在实现这个规划过程中遇到的重要问题就是到企业内部相关业务部门进行需求分析，需求分析的过程就是员工参与的过程，员工信息化素质的高低在需求分析过程中将得到充分的体现。 随着企业对信息化认知度的提高，很多企业信息系统建设方兴未艾，迫切期望从信息化建设中受益，但很多项目的开发使用效果并没有令人满意，甚至违背了建设初衷，与企业管理实际的符合性没有随着应用需求的提高而同步提高，问题出在哪里？ 1、项目调研时，企业员工虽然对计算机的理解与使用较之前些年有较大的提高，但局限于计算机的基本操作，他们只能提出自己岗位具体的现行业务描述，较少关心自己业务与他人业务在信息流方面的影响与联系，没有能力对系统分析人员提出基于计算机网络管理需求的建议。 2、部门领导对于企业发展战略的理解局限于本部门的业务，把自己业务的战略需求看成孤立的、本位的，企业战略在部门内部大打折扣，即使是部门内部业务的改进也不愿意触及管理创新带来的矛盾冲突，遇到矛盾绕着走，阻碍了信息技术作用的发挥，影响了信息系统效果，拖了信息化的后腿。 3、公司管理层在做数据资源方案整合时对信息化管理理念理解欠缺，通盘应用能力有限，方案审定时丢三落四、顾此失彼，身在业务流程里转，心却难以在流程里驻，专注宏观性很强的功能整体框架的合理性，忽略业务流程对管理创新作用，缺乏具体业务创新性指导，站在传统工业化角度审视信息化建设，把优化业务流程的机会从眼皮底下溜走，造成系统开发内容空洞，概念与实际相脱节、与企业发展战略相脱节，系统分析有其名无其实。 4、系统分析人员对企业业务了解片面，对于不健康的调研结果偏听偏信，顺其自然，凭自
大数据处理常用技术简介
大数据处理常用技术简介 storm,Hbase,hive,sqoop, spark,flume,zookeeper如下 ?Apache Hadoop:是Apache开源组织的一个分布式计算开源框架，提供了一个分布式文件系统子项目(HDFS)和支持MapReduce分布式计算的软件架构。 ?Apache Hive:是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，通过类SQL语句快速实现简单的MapReduce 统计，不必开发专门的MapReduce应用，十分适合数据仓库的统计分析。 ?Apache Pig:是一个基于Hadoop的大规模数据分析工具，它提供的SQL-LIKE语言叫Pig Latin，该语言的编译器会把类SQL的数据分析请求转换为一系列经过优化处理的MapReduce运算。 ?Apache HBase:是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统，利用HBase技术可在廉价PC Server上搭建起大规模结构化存储集群。 ?Apache Sqoop:是一个用来将Hadoop和关系型数据库中的数据相互转移的工具，可以将一个关系型数据库（MySQL ,Oracle ,Postgres等）中的数据导进到Hadoop的HDFS中，也可以将HDFS的数据导进到关系型数据库中。 ?Apache Zookeeper:是一个为分布式应用所设计的分布的、开源的协调服务，它主要是用来解决分布式应用中经常遇到的一些数据管理问题，简化分布式应用协调及其管理的难度，提供高性能的分布式服务?Apache Mahout:是基于Hadoop的机器学习和数据挖掘的一个分布式框架。Mahout用MapReduce实现了部分数据挖掘算法，解决了并行挖掘的问题。 ?Apache Cassandra:是一套开源分布式NoSQL数据库系统。它最初由Facebook开发，用于储存简单格式数据，集Google BigTable的数据模型与Amazon Dynamo的完全分布式的架构于一身 ?Apache Avro:是一个数据序列化系统，设计用于支持数据密集型，大批量数据交换的应用。Avro是新的数据序列化格式与传输工具，将逐步取代Hadoop原有的IPC机制 ?Apache Ambari:是一种基于Web的工具，支持Hadoop集群的供应、管理和监控。 ?Apache Chukwa:是一个开源的用于监控大型分布式系统的数据收集系统，它可以将各种各样类型的数据收集成适合Hadoop 处理的文件保存在HDFS 中供Hadoop 进行各种MapReduce 操作。 ?Apache Hama:是一个基于HDFS的BSP（Bulk Synchronous Parallel)并行计算框架, Hama可用于包括图、矩阵和网络算法在内的大规模、大数据计算。
海事信息化系统总体解决方案
海事信息化系统总体解决方案 一、概述 根据中华人民共和国《海上交通安全法》和《内河交通安全管理条例》，中华人民共和国海事系统的主要日常职能包括: 1、船舶管理: 船舶登记、船舶安全检查、船舶进出港管理、船舶签证管理、船舶在港作业管理、船舶动态管理、防止船舶污染管理等与船舶相关的业务。 2、船员管理: 船员注册、船员培训、船员考试、船员证书管理、船员跟踪管理、船员档案管理、船员试题库管理、对外监督管理、质量体系管理等与船员相关的业务。 3、通航管理: 通航水域管理、水上水下施工作业管理、通航警告与通告管理、助航标志管理、通航秩序管理。 4、船载客货管理: 危险品进出口的监控管理；危货安全积载监装；危险品违章处理以及危险品作业场站的管理。 5、事故应急管理:统一管理应急力量，处理海上事故。 根据海事业务的需要，中创软件承担并开发了包括船舶管理、船员管理、通航管理、船载客货、事故应急等子系统的水上安全监督管理信息系统，并且在全国海事系统成功推广应用。水上安全监督管理信息系统作为海事系统的核心业务在海事系统的成功应用对海事业务起到了巨大的推动作用，具体体现在： 1、提升了海事系统严格执法、为民服务的能力，提高了业务效率。 2、第一次较好整合了海事核心业务，在全国范围业务标准化的基础上建立了信息标准化，形成了符合法规要求的、统一的、标准的业务信息化管理体系，提升了全国各辖区之间的信息共享的能力。 3、建立了一支专业的、规范的信息化队伍。 二、核心业务解决方案 1、系统结构: 海事信息化核心业务系统（即水上安全监督管理信息系统）主要由船舶管理、船员管理、通航管理、事故应急、船载客货等系统构成。结构见下图： 2、系统构成及功能: 海事信息化系统核心业务（即水上安全监督管理信息系统）由船舶管理、船员管理、通航管理、事故应急、船载客货等系统构成。 船舶管理系统，建立全国统一的船舶数据库，实现一船一档，全系统共享；实现船舶按局、种类、吨位、船籍港、船龄等条件的统计、查询、打印功能；实现船舶登记、船舶安全检查、船舶进出港管理、船舶签证管理、船舶在港作业管理、船舶动态管理、船舶黑名单管理等与船舶相关的功能。 船员管理系统，建立全国统一的船员数据库，实现一人一档，在海事系统内共享；实现对船员按各种类别、发证单位、年龄、文化程度等条件进行统计、查询，对各种证书的发放情况进行统计；建立集中的船员全国统考试题库；实现对全国各船员公司、培训机构、院校等社会培训部门的相关信息的管理；实现船员注册、船员培训、船员考试、船员证书管理、船员劳动合同管理、船员档案管理等与船员相关的功能。 通航管理系统，实现通航水域管理、水上水下施工作业管理、通航警告与通告管理、助航标志管理、通航秩序管理等基本业务功能；实现航行通警告拟稿、打印、统计、汇编的自动化。 事故应急系统，建立全国统一的海事数据库，记录每次海上事故发生、处理情况；实现分地区、分时间、分种类对海上事故进行查询、分析、统计；实现应急力量的统一管理；实
智能手机终端的数据采集及分析系统
智能手机终端的数据采集及分析系统 主要功能如下： 采集使用数据采集程序手机的手机号码：数据采集程序必须开通GPRS，实时传输采集数据及监听服务端指令；所以会有一定的数据量。为解决用户因GPRS传输采集数据产生的费用，所以记录用户的手机号码。 采集GPS信息：经纬度，时间，速度； 采集无线网络状况信息：GSM，GPRS网络情况； 获取的无线网络信息并附加GPS信息，帮助数据分析专家系统分析处理； 数据采集终端的主要功能如下： 实时诊断网络信息； 诊断分为空闲时诊断与使用时诊断； 空闲时诊断：根据运营商的相关规定设定网络异常指标；当手机处于空闲状态时，指定频率（秒）获取无线网络的基本参数，如CID，LAC，BSIC，BCCH，RxQuality，RxLevel，C/I，C/A,TxPower,TA,TS等；根据设定的异常指标来判断是否出现异常;如果出现异常则保存本次信息，并获取此时此地的GPS信息、本手机的手机号码一并发送至指定服务器，由“数据分析专家系统”分析处理。 发送数据内容：本手机的手机号码+无线网络基本参数+GPS信息； 数据格式：XML文件格式； 传输方式：使用GPRS进行数据传输； 使用时诊断：用户使用手机时，检测用户使用过程中无线网络的状况；如手机数据下载过程中，检测总的下载量，下载时间，是否下载成功，如果不正常则记录本次使用过程； 诊断项： 2通话：未接通、掉话、呼叫时延； 2短信（SMS），彩信（MMS）：是否发送或接受成功、发送或接受时间； 2GPRS Attach：Attach是否成功、Attach成功的时长PDP激活，PDP激活是否成功、激活成功的时长； 2WAP数据传输：WAP登陆测试；WAP登陆是否成功；WAP登陆成功时长； 2WAP刷新测试：WAP刷新是否成功；WAP刷新成功时长；
大数据处理技术的特点
1)Volume(大体量):即可从数百TB到数十数百PB、 甚至EB的规模。 2)Variety(多样性):即大数据包括各种格式和形态的数据。 3)Velocity(时效性):即很多大数据需要在一定的时间限度下得到及时处理。 4)Veracity(准确性):即处理的结果要保证一定的准确性。 5)Value(大价值):即大数据包含很多深度的价值,大数据分析挖掘和利用将带来巨大的商业价值。 传统的数据库系统主要面向结构化数据的存储和处理,但现实世界中的大数据具有各种不同的格式和形态,据统计现实世界中80%以上的数据都是文本和媒体等非结构化数据;同时,大数据还具有很多不同的计算特征。我们可以从多个角度分类大数据的类型和计算特征。 1)从数据结构特征角度看,大数据可分为结构化与非结构化/半结构化数据。 2)从数据获取处理方式看,大数据可分为批处理与流式计算方式。 3)从数据处理类型看,大数据处理可分为传统的查询分析计算和复杂数据挖掘计算。 4)从大数据处理响应性能看,大数据处理可分为实时/准实时与非实时计算,或者是联机计算与线下计算。前述的流式计算通常属于实时计算,此外查询分析类计算通常也要求具有高响应性能,因而也可以归为实时或准实时计算。而批处理计算和复杂数据挖掘计算通常属于非实时或线下计算。 5)从数据关系角度看,大数据可分为简单关系数据(如Web日志)和复杂关系数据(如社会网络等具有复杂数据关系的图计算)。
6)从迭代计算角度看,现实世界的数据处理中有很多计算问题需要大量的迭代计算,诸如一些机器学习等复杂的计算任务会需要大量的迭代计算,为此需要提供具有高效的迭代计算能力的大数据处理和计算方法。 7)从并行计算体系结构特征角度看,由于需要支持大规模数据的存储和计算,因此目前绝大多数禧金信息大数据处理都使用基于集群的分布式存储与并行计算体系结构和硬件平台。
海事局指挥中心系统方案
某海事局信息网络及配套设施工程解决方案 （包一：搜救决策和指挥系统） 一、综述 随着计算机技术的发展，信息化社会的建设，各地政府、企业、社会服务行业对图像、文字、声音语言信息的交流已提高到了一个新水平阶段。过去，单一的会议交流方式已无法适应信息技术的发展，今天，我们需要在会议过程中进行更多的信息了解（本地或远程的图像、文字、活动视频及相关声音、语言等），需要在会议过程中交流更多的意见（本地或远端的多方发言、讨论等），需要在会议过程中调动更多的交流手段并且采用高效、便捷、低成本的会议方式。智能化数字音视频会议系统，将传统音频、视频、计算机技术、自动化控制技术等信息手段融为一体，为应对现阶段信息技术发展需求而服务的新一代智能化会议系统。 本着从满足业主需求的角度出发，在严格遵循“投资合理、统一规划、立足现状、适度超前”的设计思想指导下，我们将立足于建设高度集成化的会议系统，以公司多年积累的会议系统工程经验和业界出众的产品，为用户提供一个先进的、合理的、高性价比的、完整全面的总体解决方案，力求使系统既能满足用户目前的应用需求，又考虑到今后技术的发展趋势，以使某海事局指挥中心的会议系统功能迅速适应和领导未来的变化。 方案将国内先进的28块60寸DLP背投组成显示技术、信号切换技术、扩声系统、数字会议发言系统（手拉手）、中央集中控制系统等的众多实际应用功能综合为一体，充分考虑了指挥系统和其他相关系统的互联需要，可和未来指挥所通信系统有机融合，形成一套功能完善、技术先进的多媒体信息综合显示、会议管理平台，满足指挥中心调度的各种显示需要。 本次建设整体建设目标是打造精品信息网络工程，构建先进的网络化业务平台，以协同办公为核心，整合多种信息服务，将信息查询、个人事务、部门业务管理、决策支持融为一体，对海事局的日常办公进行综合管理，使海事局的各类管理工作更加规范，实现海
关于企业信息化建设的思考
关于企业信息化建设的思考 范殷铭（漳州市建筑设计院363000） 【提要】本文阐述了信息化是先进生产力发展的方向，并对企业信息化建设提出了个人的看法。 【关键词】企业，信息化，生产力 The ideas about the enterprise Informationalization Fan Yinming(Zhangzhou Architectural Design Institute 363000) Abstract：The orientation that the informationalization is the well-developed productive forces developments was elaborateed by the original ，Moreover some personal perspective is given for the enterprise informationalization。 Keyword：enterprise，informationalization，the productive forces 一、引言 江泽民总书记在十六大报告中指出：坚持以信息化带动工业化，以工业化促进信息化，信息化是我国加快实现工业化和现代化的必然选择。但工程设计企业信息化是一项复杂的系统工程，在具体实施信息化的过程中，许多工程设计企业有很多疑虑和困惑。为此，本文阐述了企业信息化是代表先进生产力发展的方向，并对企业信息化建设提出了个人的看法。 二、信息化是先进生产力发展的方向 什么是信息化?企业信息化的基本含义是什么？是不是拥有电脑、拥有企业网站企业就进入信息化了呢？或者说，信息化就是网络化，就是计算机、电脑的普及？当然不是！这些认识都是不正确和片面的。 那么什么是企业的信息化呢？企业信息化就是利用计算机、通信和网络为核心的现代信息技术，充分开发和广泛利用企业内外部信息资源，进行有效的整合，降低企业内外部协同成本，使企业更加灵活、更具创新能力，进而提高劳动生产率和提升企业的核心竞争力的过程。工程设计企业信息化主要表现在企业作业、管理和经营三个层面上，即实现设计自动化、办公自动化、决策辅助自动化和电子商务等企业运行的全面自动化。 信息化是一个过程，是一个动态变化的过程。实际上，许多企业还停留在企业信息化建设的低级阶段上，即还处于文字处理、财务管理等办公自动化的应用水平上，或者更进一步，拥有了只是停留在信息共享层面上的局域网，而在生产控制方面的应用则很少。目前进入信息化建设高级阶段的工程设计企业还非常少，如实施了ERP（企业资源计划）和CRM（客户关系管理）等方案，并能够参与电子商务，如网上查询、网上发布信息、网上支付，甚至劳动工具网络化、智能化，从设计、图纸绘制、修改及审核等都通过互联网进行，使得甲乙双方或合作伙伴间的业务流程达到更加专业一体化的增值服务。 企业信息化是生产力发展带来的对生产关系的大变革，是先进生产力发展的方向，正如江泽民总书记所说：“信息技术越来越深刻地影响着人类社会的发展”、“四个现代化，哪一化也离不开信息化”。可以说信息技术是当代最活跃的生产力，它正在改变的不仅仅是技术手段，更是一场技术革命对现行体制、观念和行为方式的冲击，是生产力发展带来的对生产关系的大变革。
海事应急辅助指挥系统解决方案-企业信息化_50
海事应急辅助指挥系统解决方案-企业信息化 1.海事应急辅助指挥系统概述 1.1.需求分析 为了提高我国海事应急指挥综合水平，保护海上人民生命和财产的安全，实践"三精两关键"，即"精良的装备、精干的队伍、精湛的技术，关键时刻发挥关键作用"和"三个海事"，即"交通海事、阳光海事、数字海事"，把"中国海上搜救中心办公室建成具有现代化、数字化、信息化管理水平，集水上安全监控、海上搜救决策、信息分析处理等为一体的组织、协调、指挥中心，努力提高搜救现代化、数字化、信息化水平"，交通部海事局在2007年1月启动了海事应急辅助指挥系统试点工程的建设，率先在中国海上搜救中心，山东、上海海上搜救中心，深圳、烟台海上搜救分中心建设海事应急辅助指挥系统。 海事应急辅助指挥系统工程的总体目标是：落实科学的发展观，以对险情进行快速、有效救助为出发点，实现应急指挥数据综合查询，搜救行动辅助决策，搜救力量联动指挥，改善、提升海事应急的组织、指挥、协调能力，提高海上搜救的效率和成功率。 本次海事应急辅助指挥系统范围上覆盖中国MRCC、上海MRCC、深圳MRSC、山东MRCC、烟台MRSC，建设内容涉及网络、通信、数据库、VTS、AIS、电子海图、搜救模型等。通过对海事系统现有信息资源和通信资源的整合，在应急指挥数据库和电子海图平台的支持下，利用海上落水人员漂移等数学模型，初步建立以实现人命救助的辅助指挥、应急预案的应用管理为重点海事应急辅助指挥系统。 中国交通部海事局应急指挥辅助系统需要实现以下四个方面的业务功能需求： 1.通过应用集成平台，整合现有信息资源，实现海事应急信息综合查询。 2.通过建立海上落水人员漂移模型等数学模型，开发海事应急辅助指挥系统，初步实现海上人命救助等应急指挥的辅助决策功能。 3.初步建立应急指挥综合调度平台，实现中国MRCC与各地MRCC、救助船舶、遇险船舶、协调单位间的通信。 4.利用现有的VSAT系统采集的事故现场图像信息，直接传送到中国MRCC;通过无线视频传输技术，实现成山头水道、前湾水域的事故现场图像信息采集和传送。 海事应急指挥辅助系统的非功能性需求：
大数据收集及分析整体解决方案
征信系统管理平台 整体解决方案 项目背景
随着经济市场化程度的加深，加快企业和个人征信体系建设已成为社会共识。党的十六大报告明确提出要“健全现代市场经济的社会信用体系”，十六届三中全会明确提出“按照完善法规、特许经营、商业运作、专业服务的方向，加快建设企业和个人信用服务体系。”温家宝总理明确指示，社会信用体系建设从信贷信用征信起步，多次强调要加快全国统一的企业和个人信用信息基础数据库建设，形成覆盖全国的信用信息网络，加快征信立法，促进征信行业的发展，积极发展专业化的信用机构，有步骤、有重点开放征信市场，逐步建立失信惩戒制度，规范社会征信机构，加强征信市场监督管理。 应用价值 征信系统管理平台的建设和推广应用，特别是通过企业和个人重要经济活动的影响和规范，逐步形成诚实守信、遵纪守法、重合同讲信用的社会风气，推动社会信用体系建设，提高社会诚信水平，促进文明社会的建设； 征信系统管理平台帮助商业银行等金融机构控制信用风险，维护金融稳定，扩大信贷范围，促进消费增长，改善经济增长结构，促进经济的可持续发展； 提高审贷效率，方便广大群众借贷，防止不良贷款，防止个人过度负债； 帮助商业银行核实客户身份，从信贷活动的源头杜绝信贷欺诈、保证信贷交易的合法性； 该平台全面反映企业和个人的信用状况，帮助商业银行确定是否提供贷款及贷款金额大小、利率高低等因素，以及奖励守信者，惩戒失信者； 该征信系统管理平台利用企业和个人征信系统遍布全国各地的网络及其对企业和个人信贷交易等重大经济活动的影响，提高法院、税务、工商、海关等政府部门的行政执法力度；通过企业和个人征信系统的约束性和影响力，培养和提高企业和个人遵守法律、尊重规则、尊重合同、恪守信用的意识，提高社会诚信水平，建设和谐美好的社会。
简介摘要：大数据时代的航运信息平台
《大数据时代的航运信息平台》专著摘要 该书是对航运信息化科学进行系统论述的第一次尝试。在大数据时代，传统产业在互联网的渗透下渐渐的失去原有的边界，原本看似牢不可破的行业门槛轻易地就被互联网平台取代，例如出版业、家电业、旅游业等。航运业作为传统产业，也面临着来自互联网和平台经济前所未有的冲击，作者试图从信息科学的角度解释航运与互联网和平台经济相结合而产生的新系统、新模式、新思维。 航运信息化发展全面进入了航运信息平台的新时代，航运业务所涉及的一切都可以抽象为信息资源，通过互联网将这些信息资源融合集聚到信息平台之上，就可以实现信息资源的统一配置。 该书首次给出了“航运信息平台”的定义，即：是通过航运信息资源的融合汇聚来满足航运业不同参与者需求的网络化信息系统，最基本的两个特征是“开放”和“聚合”。航运信息平台主要分为航运电子商务平台、航运电子政务平台、航运信息服务平台三类。书中分析了航运信息平台的发展现状，指出航运信息化的发展呈现“需求向导、数据驱动、全程可视、远程智能、云端共享、电子商务、互联融合、生态发展”趋势。 随后，作者论述了航运信息平台发展的时代特征——航运大数据。分析了航运大数据的定义、框架和意义。在此基础上，该书分别分析了航运电子商务平台、航运电子政务平台、航运信息服务平台三类航运信息平台的特点、模式、案例、经验。 第一，航运电子商务平台，是航运电子商务活动中为交易双方或多方提供交易撮合及相关服务的网络信息系统的总和，基本功能有：交易撮合、流程控制、支付结算、信用监督。航运电子商务平台将取代现有的航运商业模式，成为航运业转型升级的历史趋势。航运电商平台按照模式分类可以分为：第一方垂直类、第三方横向类、第四方聚合类，按业务分类可以分为：货物运输类、船舶业务类、客运业务类。货运类的航运电商发展将会经历货运平台、物流平台、贸易平台三个阶段，货代企业生存空间必然受到压缩，但是货代企业不会被消灭。 第二，航运电子政务平台克服了过去垂直整合系统信息无法横向流动、模块固化重复、维护成本高等缺陷，实现了政府信息资源化、信息资源共享流动、互联网在线政务信息服务，成为一种发展趋势。航运电子政务平台发展有利于：跨
2018年度大数据时代的互联网信息安全考试题及答案
2018 年度大数据时代的互联网信息安全考试
考试时间：2017-06-01 11:23-2017-06-01 11:44
100 分
得分：2 分
?
1.要安全浏览网页，不应该（ ）（单选题 2 分）
o o o o
A.定期清理浏览器缓存和上网历史记录 B.在公用计算机上使用“自动登录”和“记住密码”功能 C.定期清理浏览器 Cookies D.禁止开启 ActiveX 控件和 Java 脚本
?
2.李同学浏览网页时弹出“新版游戏，免费玩，点击就送大礼包”的广告，李同学点了之后 发现是个网页游戏，提示： “请安装插件” ， 请问， 这种情况李同学应该怎么办最合适? （ ） （单选题 2 分）
o
得分：2 分 A.网页游戏一般是不需要安装插件的，这种情况骗局的可能性非常大，
不建议打开
o o o ?
B.为了领取大礼包，安装插件之后玩游戏 C.先将操作系统做备份，如果安装插件之后有异常，大不了恢复系统 D.询问朋友是否玩过这个游戏，朋友如果说玩过，那应该没事 得分：2 分
3.“短信轰炸机”软件会对我们的手机造成怎样的危害（ ）（单选题 2 分）
o o o o
A.会使手机发送带有恶意链接的短信 B.会大量发送垃圾短信，永久损害手机的短信收发功能 C.会损害手机中的 SIM 卡 D.短时内大量收到垃圾短信，造成手机死机 得分：2 分
?
4.位置信息和个人隐私之间的关系，以下说法正确的是（ ）（单选题 2 分）
o o o
A.位置隐私太危险，不使用苹果手机，以及所有有位置服务的电子产品 B.我就是普通人，位置隐私不重要，可随意查看 C.需要平衡位置服务和隐私的关系，认真学习软件的使用方法，确保位
置信息不泄露
o ?
D.通过网络搜集别人的位置信息，可以研究行为规律 得分：2 分
5.注册或者浏览社交类网站时，不恰当的做法是：（ ）（单选题 2 分）
o
A.信任他人转载的信息
数据采集与分析
审计数据采集与分析技术 计算机审计的含义 ?计算机审计有3层含义： –面向数据的审计 –面向现行信息系统的审计 –对信息系统生命周期的审计 面向数据的计算机审计流程 ?审前调查：电子数据的组织、处理和存储 ?数据采集：审计接口、数据库访问技术、数据采集技术 ?数据清理、转换、验证、建立中间表 ?数据分析：数据分析技术、SQL、审计软件 ?审计取证 一、审前调查及电子数据的组织、处理和存储 1.审前调查的内容和方法 ?对组织结构调查 ?对计算机信息系统的调查 ?提出数据需求 2.电子数据的组织、处理和存储 电子数据处理的特点 ?存储介质改变 ?基于一定的数据处理平台，有一定的数据模型 ?数据表示编码化（各种编码） ?带来系统控制和数据安全性的新问题 ?审计线索改变 如何表示数据 ?数据类型与数据取值 –数据类型决定了取值范围与运算范围 ?数据模型 –数据模型是对现实世界数据特征的抽象 –它提供模型化数据和信息的工具
数据模型的2个层次 ? ?概念模型 –E-R模型的要素 ?实体：客观存在并可以相互区分的事物，用方框表示 ?属性：实体的特征或性质，用椭圆表示 ?联系：实体之间的联系，用菱形表示 ?数据模型 –关系模型 –层次模型 –网状模型 数据模型的3个要素 ?数据结构 –描述模型的静态特征 –是刻画数据模型最重要的方面 ?数据操作 –描述模型的动态特性 ?数据检索 ?数据更新（增加、删除、修改） ?约束条件 –一组完整性规则的集合 ?实体完整性 ?引用（参照）完整性 ?用户定义的完整性 关系模型 ?关系模型是目前最常用的一种数据模型 ?关系数据库采用关系模型作为数据的组织方式 ?关系模型建立在严格的关系代数基础之上 ?关系模型概念单一，用关系表示实体以及实体之间的联系?关系数据库的标准语言SQL是一种非过程化语言，使用方便关系模型的数据结构 ?关系 –一张二维表，每一列都不可再分 –表中的行、列次序并不重要 ?元组 –二维表中的每一行，相当于一条记录 ?属性 –二维表中的每一列，属性有名称与类型。 –属性不可再分，不允许重复 ?主键 –由表中的属性或属性组组成，用于唯一确定一条记录?域
大数据处理技术的总结与分析
数据分析处理需求分类 1 事务型处理 在我们实际生活中,事务型数据处理需求非常常见,例如：淘宝网站交易系统、1２306网站火车票交易系统、超市ＰOＳ系统等都属于事务型数据处理系统。这类系统数据处理特点包括以下几点: 一就是事务处理型操作都就是细粒度操作,每次事务处理涉及数据量都很小。 二就是计算相对简单，一般只有少数几步操作组成，比如修改某行得某列; 三就是事务型处理操作涉及数据得增、删、改、查,对事务完整性与数据一致性要求非常高。 四就是事务性操作都就是实时交互式操作,至少能在几秒内执行完成； 五就是基于以上特点,索引就是支撑事务型处理一个非常重要得技术. 在数据量与并发交易量不大情况下,一般依托单机版关系型数据库,例如OＲＡＣLＥ、MＹSQL、SQＬSERVER,再加数据复制（DataGurａd、RＭAＮ、ＭｙSQＬ数据复制等)等高可用措施即可满足业务需求。 在数据量与并发交易量增加情况下，一般可以采用ORＡLＣＥRAC集群方式或者就是通过硬件升级（采用小型机、大型机等，如银行系统、运营商计费系统、证卷系统)来支撑. 事务型操作在淘宝、1230６等互联网企业中,由于数据量大、访问并发量高，必然采用分布式技术来应对,这样就带来了分布式事务处理问题，而分布式事务处理很难做到高效，因此一般采用根据业务应用特点来开发专用得系统来解决本问题。
２数据统计分析 数据统计主要就是被各类企业通过分析自己得销售记录等企业日常得运营数据,以辅助企业管理层来进行运营决策。典型得使用场景有:周报表、月报表等固定时间提供给领导得各类统计报表;市场营销部门,通过各种维度组合进行统计分析,以制定相应得营销策略等． 数据统计分析特点包括以下几点: 一就是数据统计一般涉及大量数据得聚合运算，每次统计涉及数据量会比较大。二就是数据统计分析计算相对复杂，例如会涉及大量goｕpbｙ、子查询、嵌套查询、窗口函数、聚合函数、排序等；有些复杂统计可能需要编写ＳQＬ脚本才能实现． 三就是数据统计分析实时性相对没有事务型操作要求高。但除固定报表外,目前越来越多得用户希望能做做到交互式实时统计； 传统得数据统计分析主要采用基于ＭＰP并行数据库得数据仓库技术.主要采用维度模型,通过预计算等方法，把数据整理成适合统计分析得结构来实现高性能得数据统计分析，以支持可以通过下钻与上卷操作,实现各种维度组合以及各种粒度得统计分析。 另外目前在数据统计分析领域,为了满足交互式统计分析需求，基于内存计算得数据库仓库系统也成为一个发展趋势,例如SAP得HANA平台。 3 数据挖掘 数据挖掘主要就是根据商业目标，采用数据挖掘算法自动从海量数据中发现隐含在海量数据中得规律与知识。
浅析海事网络安全
浅析海事网络安全 济南海事局王军 关键词：海事网络安全防火墙 在我国的海事管理体系中，中央海事管理机构由交通部设置，垂直管理20个直属海事机构；地方海事管理机构由省级人民政府设置并加以管理，其中交通部直属的20个海事局分布在我国内河流域的主要干线和沿海重要港口，覆盖大部分经济发达地区，形成了一张水上交通“网络”，履行国家水上安全监督、防止船舶污染、船舶及海上设施检验、航海保障管理和行政执法的重要职能。 2000年至2002年期间，交通部海事局和交通部水运规划设计院共同设计、规划和组织开发水上安全监督系统一期工程。一期工程覆盖了全国直属海事局的海事信息主干网，将实现部海事局和20个直属海事机构之间、各直属海事机构之间的网络连接和信息交流，并建成了部海事局和各海事机构的局域网。 全国海事系统的计算机都通过网络联系到一起，信息安全的内涵也就发生了根本的变化。它不仅从一般性的防卫变成了一种非常普通的防范，而且还从一种专门的领域变成了无处不在。当我们步入21世纪这一信息社会、网络社会的时候，建立起一套完整的海事网络安全体系也成为当务之急。 网络安全技术是一个十分复杂的系统工程,它包含着多种应用技术，笔者根据海事系统网络安全的特点，重点针对网络防火墙技术谈一下几点认识。 一、网络防火墙技术的概念 网络防火墙技术是一种用来加强网络之间访问控制，防止外部网络用户以非法手段通过外部网络进入海事系统内部网络，访问海事内部网络资源，保护内部网络操作环境的特殊网络互联设备。它对两个或多个网络之间传输的数据包如链接方式按照一定的安全策略来实施检查，以决定网络之间的通信是否被允许，并监视海事网络运行状态。 二、防火墙的分类及各自的特点 自从1986年美国Digital公司在Internet上安装了全球第一个商用防火墙系统，提出了防火墙概念后，防火墙技术得到了飞速的发展。国内外已有数十家公
海事信息安全形势分析与对策思考
龙源期刊网 https://www.360docs.net/doc/c78891361.html, 海事信息安全形势分析与对策思考 作者：陈一路 来源：《珠江水运》2013年第07期 摘要：利用新技术，加强信息安全，提高海事监管能力，促进海事信息安全系统建设。增强民众海洋、海权意识，推动我国海洋经济健康、快速、可持续发展，铸造中国高效海事监管平台，树立国际威信，维护国家海洋权益。 关键词：信息安全完善监管海事发展 目前，网络信息无处不在，社会信息化比以往任何时候都更加深入生活与工作的各个领域。我国是国际海事组织（IMO）A类理事国，是国际海上人命安全公约“SOLAS公约”的缔约国和国际电联（ITU）会员国。因此，必须严格遵守相关的国际规定和履行相应的国际义务，不断提高海事监管水平和履约能力。网络信息的快速发展，信息服务成为海事监管和海事履约服务的新手段。因此，提高网络信息的安全性及可靠性，在海事科学发展过程中比以往更具有价值和意义。 然而，在日常工作中也发现，我们的网络信息系统中常常出现运转不灵，反应缓慢，甚至出现黑客入侵、数据丢失泄密、网络瘫痪等安全事件。这严重危害海事队伍对海洋监管的有效性，影响我国海事的新形象，破坏海事执法队伍维护海洋利益、主权的能力。我国是海洋大国，海洋权益广泛，随着国际海洋形势的变化，各国对海洋资源的重视，要维护好国家海洋权益，我国海事队伍的发展也越来越依赖于网络信息系统建设和互联网的进步。因此，海事网络信息安全问题就成为值得我们广泛关注与思考的问题。 1 信息安全状况及其重要性 1.1信息系统及其安全现状 我国的信息化水平无论在广度还是在应用深度上都仍然处于发展的初期，海事网络信息系统也不例外。因此，普遍缺乏对网络信息系统空间的整体规划，缺乏对网络信息通信系统空间管理安全性的关注，缺乏对国家政务信息和业务数据保密性的有效管理，缺乏对整体职能设备资源相互依赖关系的理解，特别是对由于某种原因的相互依赖关系所导致的信息安全风险相互抵押的态势，缺乏各环节、各分机构对信息安全重要性的深入感知，以至于仅凭传统的基于协议、检测响应防火墙、防病毒软件、IDS等安全老三样技术，甚至再加上UTM、WEB防火墙、SOC等新技术，都无法确保网络信息通信系统的安全性和可靠性。据中国国家计算机网 络应急技术处理协调中心的网站称，2012年1～6月，大约我国780万台计算机受到来自27900个国外IP地址的袭击，这些袭击的来源大部分在美国，其比例占24%以上。日本紧随其后，占17.2%。2012年4月，全球黑客“匿名者”组织说，他们计划摧毁5个中国公司网站。同
大数据处理常用技术有哪些
大数据处理常用技术有哪些? storm,hbase,hive,sqoop.spark,flume,zookeeper如下 ?Apache Hadoop:是Apache开源组织的一个分布式计算开源框架，提供了一个分布式文件系统子项目(HDFS)和支持MapReduce分布式计算的软件架构。 ?Apache Hive:是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，通过类SQL语句快速实现简单的MapReduce 统计，不必开发专门的MapReduce应用，十分适合数据仓库的统计分析。 ?Apache Pig:是一个基于Hadoop的大规模数据分析工具，它提供的SQL-LIKE语言叫Pig Latin，该语言的编译器会把类SQL的数据分析请求转换为一系列经过优化处理的MapReduce运算。 ?Apache HBase:是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统，利用HBase技术可在廉价PC Server上搭建起大规模结构化存储集群。 ?Apache Sqoop:是一个用来将Hadoop和关系型数据库中的数据相互转移的工具，可以将一个关系型数据库（MySQL ,Oracle ,Postgres等）中的数据导进到Hadoop的HDFS中，也可以将HDFS的数据导进到关系型数据库中。 ?Apache Zookeeper:是一个为分布式应用所设计的分布的、开源的协调服务，它主要是用来解决分布式应用中经常遇到的一些数据管理问题，简化分布式应用协调及其管理的难度，提供高性能的分布式服务?Apache Mahout:是基于Hadoop的机器学习和数据挖掘的一个分布式框架。Mahout用MapReduce实现了部分数据挖掘算法，解决了并行挖掘的问题。 ?Apache Cassandra:是一套开源分布式NoSQL数据库系统。它最初由Facebook开发，用于储存简单格式数据，集Google BigTable的数据模型与Amazon Dynamo的完全分布式的架构于一身 ?Apache Avro:是一个数据序列化系统，设计用于支持数据密集型，大批量数据交换的应用。Avro是新的数据序列化格式与传输工具，将逐步取代Hadoop原有的IPC机制 ?Apache Ambari:是一种基于Web的工具，支持Hadoop集群的供应、管理和监控。 ?Apache Chukwa:是一个开源的用于监控大型分布式系统的数据收集系统，它可以将各种各样类型的数据收集成适合Hadoop 处理的文件保存在HDFS 中供Hadoop 进行各种MapReduce 操作。 ?Apache Hama:是一个基于HDFS的BSP（Bulk Synchronous Parallel)并行计算框架, Hama可用于包括图、矩阵和网络算法在内的大规模、大数据计算。
大数据分析平台技术要求
大数据平台技术要求 1. 技术构架需求 采用平台化策略，全面建立先进、安全、可靠、灵活、方便扩展、便于部署、操作简单、易于维护、互联互通、信息共享的软件。 技术构架的基本要求： 采用多层体系结构，应用软件系统具有相对的独立性，不依赖任何特定的操作系统、特定的数据库系统、特定的中间件应用服务器和特定的硬 件环境，便于系统今后的在不同的系统平台、不同的硬件环境下安装、 部署、升级移植，保证系统具有一定的可伸缩性和可扩展性。 实现B（浏览器）/A（应用服务器）/D（数据库服务器）应用模式。 采用平台化和构件化技术，实现系统能够根据需要方便地进行扩展。2. 功能指标需求 2.1基础平台 本项目的基础平台包括：元数据管理平台、数据交换平台、应用支撑平台。按照SOA的体系架构，实现对我校数据资源中心的服务化、构件化、定制化管理。 2.1.1元数据管理平台 根据我校的业务需求，制定统一的技术元数据和业务元数据标准，覆盖多种来源统计数据采集、加工、清洗、加载、多维生成、分析利用、发布、归档等各个环节，建立相应的管理维护机制，梳理并加载各种元数据。 具体实施内容包括： ●根据业务特点，制定元数据标准，要满足元数据在口径、分类等方面的 历史变化。 ●支持对元数据的管理，包括：定义、添加、删除、查询和修改等操作，
支持对派生元数据的管理，如派生指标、代码重新组合等，对元数据管 理实行权限控制。 ●通过元数据，实现对各类业务数据的统一管理和利用，包括： ?基础数据管理：建立各类业务数据与元数据的映射关系，实现统一 的数据查询、处理、报表管理。 ?ETL：通过元数据获取ETL规则的描述信息，包括字段映射、数据转 换、数据转换、数据清洗、数据加载规则以及错误处理等。 ?数据仓库：利用元数据实现对数据仓库结构的描述，包括仓库模式、 视图、维、层次结构维度描述、多维查询的描述、立方体（CUBE） 的结构等。 ●元数据版本控制及追溯、操作日志管理。 2.1.2数据交换平台 结合元数据管理模块并完成二次开发，构建统一的数据交换平台。实现统计数据从一套表采集平台，通过数据抽取、清洗和转换等操作，最终加载到数据仓库中，完成整个数据交换过程的配置、管理和监控功能。 具体要求包括： ●支持多种数据格式的数据交换，如关系型数据库：MS-SQLServer、MYSQL、 Oracle、DB2等；文件格式：DBF、Excel、Txt、Cvs等。 ●支持数据交换规则的描述，包括字段映射、数据转换、数据转换、数据 清洗、数据加载规则以及错误处理等。 ●支持数据交换任务的发布与执行监控，如任务的执行计划制定、定期执 行、人工执行、结果反馈、异常监控。 ●支持增量抽取的处理方式，增量加载的处理方式； ●支持元数据的管理，能提供动态的影响分析，能与前端报表系统结合， 分析报表到业务系统的血缘分析关系； ●具有灵活的可编程性、模块化的设计能力，数据处理流程，客户自定义 脚本和函数等具备可重用性； ●支持断点续传及异常数据审核、回滚等交换机制。
大数据与信息安全
大数据对信息安全带来的技术和挑战 周恩来政府管理学院政治学与行政学宋梓林1312756 1.大数据时代 最早提出“大数据”时代已经到来的机构是全球知名咨询公司麦肯锡。麦肯锡在研究报告中指出，数据已经渗透到每一个行业和业务职能领域，逐渐成为重要的生产因素；而人们对于直面大数据对信息安全的挑战。 对于“大数据”（Big data）研究机构Gartner给出了这样的定义。“大数据”是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。大数据技术的战略意义不在于掌握庞大的数据信息，而在于对这些含有意义的数据进行专业化处理。换言之，如果把大数据比作一种产业，那么这种产业实现盈利的关键，在于提高对数据的“加工能力”，通过“加工”实现数据的“增值”。 从技术上看，大数据与云计算的关系就像一枚硬币的正反面一样密不可分。大数据必然无法用单台的计算机进行处理，必须采用分布式架构。它的特色在于对海量数据进行分布式数据挖掘（SaaS），但它必须依托云计算的分布式处理、分布式数据库（PaaS）和云存储、虚拟化技术（IaaS）。 大数据可分成大数据技术、大数据工程、大数据科学和大数据应用等领域。目前人们谈论最多的是大数据技术和大数据应用。工程和科学问题尚未被重视。大数据工程指大数据的规划建设运营管理的系统工程；大数据科学关注大数据网络发展和运营过程中发现和验证大数据的规律及其与自然和社会活动之间的关系。 物联网、云计算、移动互联网、车联网、手机、平板电脑、PC以及遍布地球各个角落的各种各样的传感器，无一不是数据来源或者承载的方式。有些例子包括网络日志，RFID，传感器网络，社会网络，社会数据（由于数据革命的社会），互联网文本和文件,互联网搜索索引,呼叫详细记录，天文学，大气科学，基因组学，生物地球化学，生物，和其他复杂或跨学科的科研，军事侦察，医疗记录,摄影档案馆,视频档案和大规模的电子商务。 随着云时代的来临，大数据（Big data）也吸引了越来越多的关注。《著云台》的分析师团队认为，大数据（Big data）通常用来形容一个公司创造的大量非结构化数据和半结构化数据，这些数据在下载到关系型数据库用于分析时会花费过多时间和金钱。大数据分析常和云计算联系到一起，因为实时的大型数据集分析需要像MapReduce一样的框架来向数十、数百或甚至数千的电脑分配工作。 大数据需要特殊的技术，以有效地处理大量的容忍经过时间内的数据。适用于大数据的技术，包括大规模并行处理（MPP）数据库、数据挖掘电网、分布式文件系统、分布式数据库、云计算平台、互联网和可扩展的存储系统。 2.大数据技术给信息安全带来的技术支持 信息安全是指信息系统（包括硬件、软件、数据、人、物理环境及其基础设施）受到保护，不受偶然的或者恶意的原因而遭到破坏、更改、泄露，系统连续可靠正常地运行，信息服务不中断，最终实现业务连续性。信息安全主要包括以下五方面的内容，即需保证信息的保密性、真实性、完整性、未授权拷贝和所寄生系统的安全性。 信息作为一种资源，它的普遍性、共享性、增值性、可处理性和多效用性，使其对于人类具有特别重要的意义。信息安全的实质就是要保护信息系统或信息网络中的信息资源免受各种类型的威胁、干扰和破坏，即保证信息的安全性。根据国际标准化组织的定义，信息安全性的含义主要是指信息的完整性、可用性、保密性和可靠性。信息安全是任何国家、政府、部门、行业都必须十分重视的问题，是一个不容忽视的国家安全战略。但是，对于不同的部门和行业来说，其对信息安全的要求和重点却是有区别的。 信息安全其根本目的就是使内部信息不受内部、外部、自然等因素的威胁。为保障信息