spark优化入门总结2017
Spark调优：
1) 开发调优
* 原则一：避免创建重复RDD
a) 如果两个RDD的数据相同，那么肯定有一个可以通过最短的连接来生成该数据，所以只是使用其中一个就可以。
b) 如果两个RDD都是通过最短路径来进行生成的，那么只是使用其中一个就可以了，可以保留两个，但是没有必要，而且结合第三个原则，所以使用一个比较合理。
* 原则二：尽可能复用同一个RDD
a) 不要同时存在RDD A和RDD B，他们可以通过简单的转换就可以相互转化，因为增加会导致增加一次算子操作，增加了性能的开销。
* 原则三：对多次使用的RDD进行持久化
a) 如果一个RDD计算出来以后，在后面会多次用到，同时该RDD的也是通过多步计算来进行生成的，那么应该持久化该RDD。
b) 持久化策略的优先级：MEMORY_ONLY（如果内存足够大）（没有持久化的数据在后面需要被用到的时候，要重新进行计算获
得）>MEMORY_ONLY_SER（如果应用MEMORY_ONLY持久化时出现OOM内存溢出时）（没有持久化的数据在后面需要被用到的时候，要重新进行计
算获得）>MEMORY_AND_DISK_SER（如果MEMORY_ONLY_SER在纯内存的情况下依然无法使用，也就是应用前面的持久化方式时，不能够缓存所有的数据到内存中，存在有的数据会从源头进行重新计算获得）
c) 不建议使用DISK_ONLY（完全基于磁盘，性能地下，和重新进行计算性能也许相当）和后缀为_2（会增加网络开销，除非要求高可用）的级别。
注意：前三个原则是一起来进行使用的，前两个原则是为第三个原则使用的。
* 原则四：尽量避免使用shuffle类算子
a) Shuffle的理解：需要通过网络拉取上一个stage的结果数据，拉取相同key值的数据到当前节点，对key值相同的数据做聚合操作的过程，称为shuffle。
b) Shuffle影响性能的原因：对读取上一个stage的结果数据（上一个stage的数据
会计初级培训学校《经济法基础》学习方法及重点总结
《经济法基础》学习技巧及重点归纳|上虞上元会计初级培训班上虞上元会计初级职称培训中心|上虞会计培训学校 第一章总论 法律关系 法律事实：法律事件（自然现象、社会现象）、法律行为 法的形式 判决书：非规范性法律文件，不能作为法的形式 法的分类 创制方式和发布形式：成文法、不成文法 内容、效力和制定程序：根本法、普通法 法的内容：实体法、程序法 空间效力、时间效力或对人的效力：一般法和特别法 主体、调整对象和形式：国际法、国内法 法的运用目的：公法、私法 仲裁（书面形式订立）行政复议：书面订立、口头形式 仲裁原则：自愿原则、独立仲裁原则、一裁终局原则（诉讼实行两审终审原则） 仲裁委员会：主任1人，副主任2-4人、委员7-11人，法律、经济贸易专家不得少于2/3 仲裁协议：书面形式订立（口头协议无效） 仲裁庭：1名仲裁员或3名仲裁员组成，3名组成的设首席仲裁员 仲裁开庭进行，一般不公开进行 调解书经双方当事人签收后，即发生法律效力 裁决书自作出之日起发生法律效力 民事诉讼 民事诉讼范围：民法、婚姻法、收养法、继承法（合同纠纷、房产纠纷、侵害名誉权纠纷）；经济法、劳动法（破产、劳动合同纠纷）；选民资格、宣告失踪死亡；债务；宣告票据和有关事项无效的案件
审判制度：合议制度、回避制度（证人不需回避）、公开审判制度、两审终审制度 合议庭成员：3人以上的单数 除最高人民法院审理第一审案件外，当事人不服第一审人民法院判决、裁定的，有权向上一级人民法院提起上诉，由上一级法院进行第二审合同纠纷：被告住所地或合同履行地人民法院管辖 保险合同纠纷：被告住所地或保险标的物所在地人民法院管辖 票据纠纷：票据支付地或被告住所地人民法院管辖 侵权行为：侵权行为地或被告住所地人民法院管辖 铁路、公路、水上和航空事故请求损害赔偿的：事故发生地或到达地、最先降落地、被告住所地人民法院管辖 不动产纠纷：不动产所在地法院管辖 港口作业纠纷：港口所在地法院管辖 继承遗产纠纷：被继承人死亡时住所地或主要遗产所在地法院管辖 诉讼时效期间：从知道或应当知道权利被害时（超过20年的不予保护） 诉讼时效：普通（知道或应知道）：2年 特别（知道或应知道）：1年（出售质量不合格商品未声明的、延付或拒付租金的、身体受到伤害要求赔偿的） 最长（实际发生日）：20年 时效中止：诉讼时效期间最后6个月，不可抗力或其他障碍使权利人不能行使请求权，事由消除后继续进行 时效中断：诉讼时效期间的任何时候，权利人向义务人提出履行义务的要求或义务人同意履行义务，事由消除后重新计算 两审终审：当事人不服第一审的，有权在判决书送达之日起15日内向上一级人民法院提起上诉（不论案件是否公开审理，一律公开宣告判决）执行措施：查询、冻结、划拨被执行人存款；扣留、提取被执行人收入；查封、扣押、冻结、拍卖、变卖被执行人财产；搜查被执行人财产；强制被执行人交付法律文件制定的财物或票证；强制被执行人迁出房屋或退出土地；强制被执行人履行法律文书指定行为；要求有关单位办理财产权证照转移手续；强制被执
2017年初级会计职称《经济法基础》基础考点(20)
【知识点】：银行汇票 1.银行汇票是由出票银行签发的，由其在见票时按照“实际结算金额”无条件支付给收款人或者持票人的票据。 2.出票银行是银行汇票的付款人。 3.银行汇票可用于转账，填明“现金”字样的银行汇票也可以支取现金。 【解释】签发现金银行汇票，申请人和收款人必须均为个人。申请人或者收款人为单位的，银行不得为其签发现金银行汇票。 4.签发银行汇票必须记载下列事项： (1)表明“银行汇票”的字样; (2)无条件支付的承诺; (3)出票金额; (4)付款人名称; (5)收款人名称; (6)出票日期; (7)出票人签章。 5.实际结算金额(2013年单选题、2014年判断题) (1)银行汇票的实际结算金额低于出票金额的，银行应按照实际结算金额办理结算，多余金额由出票银行退交申请人。 (2)未填明实际结算金额和多余金额或者实际结算金额超过出票金额的，银行不予受理。 (3)实际结算金额一经填写不得更改，更改实际结算金额的银行汇票无效。 (4)银行汇票的背书转让以不超过出票金额的实际结算金额为准。未填写实际结算金额或者实际结算金额超过出票金额的银行汇票不得背书转让。
【例题1·判断题】未填明实际结算金额和多余金额或者实际结算金额超过出票金额的银行汇票，银行不予受理。( )(2014年) 【答案】√ 【例题2·单选题】根据支付结算法律制度的规定，下列关于银行汇票出票金额和实际结算金额的表述中，正确的是( )。(2013年) A.如果出票金额低于实际结算金额，银行应按出票金额办理结算 B.如果出票金额低于实际结算金额，银行应按实际结算金额办理结算 C.如果出票金额高于实际结算金额，银行应按出票金额办理结算 D.如果出票金额高于实际结算金额，银行应按实际结算金额办理结算 【答案】D 【解析】(1)选项AB：实际结算金额超过出票金额的，银行不予受理;(2)选项CD：实际结算金额低于出票金额的，银行应按照实际结算金额办理结算，多余金额由出票银行退交申请人。 6.提示付款 (1)银行汇票的提示付款期限自出票日起1个月，持票人超过付款期限提示付款的，代理付款银行不予受理。 (2)持票人向银行提示付款时，必须同时提交银行汇票和解讫通知，缺少任何一联，银行不予受理。 (3)持票人超过付款期限向“代理付款银行”提示付款被拒绝付款的，必须在票据权利时效(2年)内向出票银行作出说明，并提供本人身份证件或者单位证明，持银行汇票和解讫通知向“出票银行”请求付款。 【解释】何为“解讫通知”?银行汇票一式四联，我们通常说的银行汇票是第二联。第一联为卡片，第二联为银行汇票，与第三联解讫通知一并由收款人自带，第四联是多余款通知。解讫通知是银行汇票所特有的，因为银行汇票的实际结算金额可以与出票金额不一致。 收款人拿到银行汇票后，应该在出票金额以内，根据实际需要将实际结算金额和多余金额准确、清晰地填入银行汇票和解讫通知的有关栏内，收款人向银行(即代理付款人)提示付
初级会计经济法基础中的时间总结
初级会计《经济法基础》中的时间总结 一、1日/24小时 （1）会计人员每年接受继续教育的时间不得少于24小时。 （2）吨税执照期满后24个小时不上下客货的船舶免征吨税。 二、2日/48小时 （1）在工作时间和工作岗位，突发疾病死亡或者在48小时经抢救无效死亡的，视同工伤。 （2）中国人民银行当地分支行应于2个工作日对开户银行报送的核准类账户的开户资料的合规性予以审核。 （3）备案类结算账户的变更和撤销应于2个工作日向中国人民银行当地分支行报备。 （4）银行在收到存款人撤销银行结算账户的申请后，对于符合销户条件的，应在2个工作日办理撤销手续。 三、3日 （1）当事人有正当理由的，可以在开庭3日前请求延期开庭。 （2）存款人开立单位银行结算账户，自正式开立之日起3个工作日后，方可使用该账户办理付款业务。 （2）托收承付的承付期“验单”付款为3天。 （2）汇票上未记载承兑日期的，应当以收到提示承兑的汇票之日起3日的最后一日为承兑日期。 （3）失票人应当在通知挂失止付后的3日，依法向票据支付地人民法院申请公示催告（或者提起普通诉讼）。 （4）人民法院决定受理公示催告申请，应当同时通知付款人及代理付款人停止支付，并自立案之日起3日发出公告。 （5）存款人开立单位银行结算账户，自正式开立之日起3个工作日后，方可适用该账户办理付款业务。 （6）拒绝付款时，以银行为付款人的，应自收到委托收款及债务证明的次日起3日出具拒绝证明。以单位为付款人的，应在付款人接到通知日的次日起3日出具拒绝证明。 四、5日
（1）备案类结算账户符合开户条件的，银行应办理开户手续，并于开户之日起5个工作日向中国人民银行当地分支行备案。 （2）存款人更改名称，但不改变开户银行及账号的，应于5个工作日向开户银行提出银行结算账户的变更申请，并出具有关部门的证明文件。 （3）单位的法定代表人或主要负责人、住址以及其他开户资料发生变更时，应于5个工作日书面通知开户银行并提供有关证明。 （4）劳动争议仲裁委员会收到仲裁申请之日起5日，通知是否受理。 （5）劳动争议仲裁委员会受理仲裁申请后，应当在5日将仲裁申请书副本送达被申请人。 （6）劳动争议仲裁委员会收到答辩书后，应在5日将答辩书副本送达申请人。 （7）劳动争议仲裁委员会应当在受理仲裁申请之日起5日将仲裁庭的组成情况书面通知当事人。 （8）仲裁庭应当在开庭5日前，将开庭日期、地点书面通知双方当事人。 （9）主管税务机关在5个工作日发给发票领购簿。 五、7日 （1）土地增值税的纳税人应在转让房地产合同签订的7日，到房地产所在地主管税务机关办理纳税申报。 （2）个人所得税扣缴义务人、自行申报纳税人每月应纳的税款，应当在次月的7日缴入国库，并向税务机关报送纳税申报表。 （3）行政复议机构应当自受理行政复议申请之7日，将行政复议申请书副本或者行政复议申请笔录复印件发送被申请人。 六、10日 （1）被申请人收到仲裁申请书副本后，应当在10日向劳动仲裁委员会提交答辩书。 （2）托收承付的承付期“验货”付款为10天。 （3）支票的持票人应当自出票日起10日提示付款。 （4）商业汇票的提示付款期限，自汇票到期日起10日。 （5）定日付款、出票后定期付款或者见票后定期付款的票据，自到期日起10日向承兑人提示付款。
2017年经济法基础真题及答案
2017年经济法基础真题及答案 单项选择题 每小题1.5分，每小题备选答案中，只有一个符合题意的正确答案，多选、错选、不选均不得分。 1(单项选择题)根据个人所得税法律制度的规定，下列各项中，暂减按10%的税率征收个人所得税的是()。 A.周某出租机动车取得的所得 B.夏某出租住房取得的所得 C.林某出租商铺取得的所得 D.刘某出租电子设备取得的所得 【答案】B 解析根据个人所得税法律制度，财产租赁所得中个人出租居民住房减按10%的税率征收个人所得税。 2(单项选择题)甲房地产开发企业开发一住宅项目，实际占地面积12 000平方米，建筑面积24 000平方米，容积率为21。甲房地产开发企业缴纳城镇土地使用税的计税依据为()。 A.24 000平方米 B.18 000平方米 C.36 000平方米 D.12 000平方米 【答案】D 3(单项选择题)根据税收征收管理法律制度的规定，下列税款中，由海关代征的是()。 A.提供研发服务，但在境内未设有经营机构的企业应缴纳的增值税 B.进口货物的企业在进口环节应缴纳的增值税 C.从境外取得所得的居民应缴纳的个人所得税 D.在境内未设立机构、场所的非居民企业来源于境内的股息所得应缴纳的企业所得税 【答案】B 4(单项选择题)根据个人所得税法律制度规定，下列情形中，应缴纳个人所得税的是()。 A.王某将房屋无偿赠予其子 B.杨某将房屋无偿赠予其外孙女 C.张某转让自用达5年以上且唯一家庭生活用房 D.赵某转让无偿受赠的商铺 【答案】D 5(单项选择题)根据企业所得税法律制度的规定，下列各项中，应以同类固定资产的重置价值为计税基础的是()。 A.盘盈的固定资产 B.自行建造的固定资产 C.外购的固定资产 D.通过捐赠取得的固定资产 【答案】A 6(单项选择题)2016年7月甲公司开发住宅社区经批准共占用耕地150 000平方米，其中800平方米修建幼儿园，5 000平方米修建学校。已知耕地占用税适用税率为30元/平方米，计算甲公司应缴纳耕地占用税税额的下列算式中，正确的是()。 A.150 000×30=4 500 000元 B.(150 000-800-5 000)×30=4 326 000元 C.(150 000-5 000)×30=4 350 000元 D.(150 000-800)×30=4 476 000元 【答案】B 7(单项选择题)根据社会保险法律制度规定，下列关于失业保险待遇，表述正确的()。 A.失业人员领取失业保险期间不享受基本医疗保险待遇 B.失业人员领取失业保险金期间重新就业的，停止领取失业保险金并同时停止享受其他失业保险待遇 C.失业保险金的标准可以低于城市居民最低生活保障标准 D.失业前用人单位和本人已经累计缴纳失业保险费满6个月的，失业人员可以申请领取失业保险金 【答案】B 8(单项选择题)根据支付结算法律制度的规定，电子承兑汇票的付款期限自出票日至到期日不能超过一定期限。()
初级经济法基础各章节知识点速记
初级经济法基础》考点速记 第一章总论 一、法律基础 ( 一) 法的概念法是由国家制定或认可，并由国家强制力保证实施的，反映着统治阶级意志的规范体系。 ( 二) 法的本质与特征 1. 法的本质法是“统治阶级”的“国家意志”的体现，这是法的本质 (1) 法只能是“统治阶级”意志的体现，是由统治阶级的物质生活条件决定的，是社会客观需要的反映。 (2) 法体现的是统治阶级的“整体意志和根本利益” ，而不是统治阶级每个成员个人意志的简单相加。 (3) 法体现的不是一般的统治阶级意志，而是统治阶级的“国家意志”的体现。 2. 法的特征 (1) 法是经过国家制定或者认可才得以形成的规范，具有国家意志性。 (2) 法是凭借国家强制力的保证而获得普遍遵行的效力，具有强制性。 (3) 法是确定人们在社会关系中的权利和义务的行为规范，具有利导性(利益导向性)。 (4) 法是明确而普遍适用的规范，具有规范性。 记忆口诀：说起法，找国家。国家制定或认可，国家强制来保证; 本质是统治阶级国家意志的体现， 特征也为国家意志性、强制性、利益导向性、规范性。 ( 三) 法律关系法律关系是被法律规范所调整的权利与义务关系，任何法律关系都由主体、客体和内容三个要素构成，缺少其中任何一个要素，都不构成法律关系。 1. 法律关系的主体(享有权利和承担义务的当事人) 法律关系主体又称权利主体或义务主体，是指参加法律关系，依法享有权利和承担义务的当事人。包括： (1) 公民(自然人) (2) 机构和组织(法人) (3) 国家 (4) 外国人和外国社会组织 2. 法律关系的内容(权利与义务) 法律关系的内容是指法律关系主体所享有的权利和承担的义务。 (1) 法律义务包括积极义务(纳税、服兵役)和消极义务(不得毁坏公共财物、不得侵害他人生命财产安全) 。 (2) 任何一方的权利都必须有另一方义务的存在，没有无义务的权利，也没有无权利的义务。也就是说，任何一方既是权利主体，也是义务主体。 记忆口诀：权义不分家。 (3) 法律上的权利和义务，都受国家法律保障。 3. 法律关系的客体(权利和义务所指向的对象) 法律关系客体又称权利客体或义务客体，是指法律关系主体的权 利和义务所指向的对象。包括： (1) 物，是指可为人们控制的，具有一定经济价值和实物形态的生产资料和消费资料。 ①自然物：土地、森林； ②人造物：机器、建筑； ③货币和有价证券。 (2) 非物质财富 ①知识产品：著作、发明； ②道德产品：荣誉称号、嘉奖表彰。 (3) 行为 ①生产经营行为； ②经济管理行为； ③提供一定劳务的行为； ④完成一定工作的行为。 (4) 人身 记忆口诀：法律关系三要素，主“享、承” ，内“权、义”，客“对象”，三缺一均不可。( 主“享、承”是指：享有权利和承担义务的当事人为主体; 客“对象”是指：权利和义务所指向的对象为客体; 内“权、义”是指：权利与义务为内容。) (四)法的形式
大数据技术与应用基础_教学大纲
《大数据技术与应用基础》教学大纲 学时：60 代码： 适用专业： 制定： 审核： 批准： 一、课程的地位、性质和任务 大数据技术的发展，已被列为国家重大发展战略。而在过去的几年里，无论是聚焦大数据发展的《促进大数据发展行动纲要》，还是《“十三五”规划》中都深刻体现了政府对大数据产业和应用发展的重视。目前国内大数据发展还处于加速期、转型期，数据与传统产业的融合还处于起步阶段，各行业对大数据分析和挖掘的应用还不理想。但随着市场竞争的加剧，各行业对大数据技术研究的热情越来越高，在未来几年，各领域的数据分析都将大规模应用。 本课程在注重大数据时代应用环境前提下，考虑大数据处理分析需求多样复杂的基本情况，从初学者角度出发，以轻量级理论、丰富的实例对比性地介绍大数据常用计算模式的各种系统和工具。考虑到当前大数据发展处于起步并逐步赶超先进的阶段，其应用领域丰富广泛，在教学过程中应注重掌握大数据分析的实践操作。本课程通过丰富简单易上手的实例，让学生能够切实体会和掌握各种类型工具的特点和应用。 二、课程教学基本要求 1. 了解大数据的发展和基本概念，理解并掌握大数据的特征及主要技术层面。 2. 掌握Scrapy环境的搭建，了解网络爬虫获取数据的过程，熟悉爬虫项目的创建。 3. 深刻了解hadoop的基础理论，理解并掌握Hadoop单机及集群环境的部署方法。 4. 掌握HDFS的基本概念和HDFS在hadoop中的作用，理解并识记HDFS的使用，了解HDFS 的JAVA API接口及数据流原理；让学生明白Map过程与Reduce过程这两个独立部分各自的原理及合作途径，知道如何独立编写满足自己需求的MapReduce程序。 5. 理解HBase中涉及的基本概念，掌握HBase的简单应用；让学生了解数据仓库的基础概念，熟悉Hive与HDFS、MapReduce直接的关心。 6. 熟悉Spark和RDD的基本概念，熟悉spark接口的使用，解决实战时的步骤及思路。
初级经济法基础重点归纳
经济法基础 第一章总论 法律关系 ◆法律事实：法律事件（自然现象、社会现象）、法律行为 法的形式 ◆判决书：非规范性法律文件，不能作为法的形式 法的分类 ◆创制方式和发布形式：成文法、不成文法 ◆内容、效力和制定程序：根本法、普通法 ◆法的内容：实体法、程序法 ◆空间效力、时间效力或对人的效力：一般法和特别法 ◆主体、调整对象和形式：国际法、国内法 ◆法的运用目的：公法、私法 仲裁（书面形式订立）行政复议：书面订立、口头形式 ◆仲裁原则：自愿原则、独立仲裁原则、一裁终局原则（诉讼实行两审终审原则） ◆仲裁委员会：主任1人，副主任2-4人、委员7-11人，法律、经济贸易专家不得少于2/3 ◆仲裁协议：书面形式订立（口头协议无效） ◆仲裁庭：1名仲裁员或3名仲裁员组成，3名组成的设首席仲裁员 ◆仲裁开庭进行，一般不公开进行 ◆调解书经双方当事人签收后，即发生法律效力 ◆裁决书自作出之日起发生法律效力 民事诉讼 ◆民事诉讼范围：民法、婚姻法、收养法、继承法（合同纠纷、房产纠纷、侵害名誉权纠纷）；经济法、劳动法（破产、劳动合同 纠纷）；选民资格、宣告失踪死亡；债务；宣告票据和有关事项无效的案件 ◆审判制度：合议制度、回避制度（证人不需回避）、公开审判制度、两审终审制度 ◆合议庭成员：3人以上的单数 ◆除最高人民法院审理第一审案件外，当事人不服第一审人民法院判决、裁定的，有权向上一级人民法院提起上诉，由上一级法院 进行第二审 ◆合同纠纷：被告住所地或合同履行地人民法院管辖 ◆保险合同纠纷：被告住所地或保险标的物所在地人民法院管辖 ◆票据纠纷：票据支付地或被告住所地人民法院管辖 ◆侵权行为：侵权行为地或被告住所地人民法院管辖 ◆铁路、公路、水上和航空事故请求损害赔偿的：事故发生地或到达地、最先降落地、被告住所地人民法院管辖 ◆不动产纠纷：不动产所在地法院管辖 ◆港口作业纠纷：港口所在地法院管辖 ◆继承遗产纠纷：被继承人死亡时住所地或主要遗产所在地法院管辖 ◆诉讼时效期间：从知道或应当知道权利被害时（超过20年的不予保护） 诉讼时效：普通（知道或应知道）：2年 特别（知道或应知道）：1年（出售质量不合格商品未声明的、延付或拒付租金的、身体受到伤害要求赔偿的） 最长（实际发生日）：20年 ◆时效中止：诉讼时效期间最后6个月，不可抗力或其他障碍使权利人不能行使请求权，事由消除后继续进行 ◆时效中断：诉讼时效期间的任何时候，权利人向义务人提出履行义务的要求或义务人同意履行义务，事由消除后重新计算 ◆两审终审：当事人不服第一审的，有权在判决书送达之日起15日内向上一级人民法院提起上诉（不论案件是否公开审理，一律 公开宣告判决） ◆执行措施：查询、冻结、划拨被执行人存款；扣留、提取被执行人收入；查封、扣押、冻结、拍卖、变卖被执行人财产；搜查被 执行人财产；强制被执行人交付法律文件制定的财物或票证；强制被执行人迁出房屋或退出土地；强制被执行人履行法律文书指
大数据开发新手学习指南(经典)
上市公司，官网：https://www.360docs.net/doc/ae15415862.html, 大数据开发初学者该如何学习 导读： 第一章：初识Hadoop 第二章：更高效的WordCount 第三章：把别处的数据搞到Hadoop上 第四章：把Hadoop上的数据搞到别处去 第五章：快一点吧，我的SQL 第六章：一夫多妻制 第七章：越来越多的分析任务 第八章：我的数据要实时 第九章：我的数据要对外 第十章：牛逼高大上的机器学习 经常有初学者会问，自己想往大数据方向发展，该学哪些技术，学习路线是什么样的，觉得大数据很火，就业很好，薪资很高……首先，如果你确定了想往这个方面发展，先考虑自己的过去从业经历、专业、兴趣是什么。计算机专业——操作系统、硬件、网络、服务器？软件专业——软件开发、编程、写代码？还是数学、统计学专业——对数据和数字特别感兴趣？ 其实这就是想告诉你大数据的三个发展方向，平台搭建/优化/运维/监控、大数据开发/设计/架构、数据分析/挖掘。 先扯一下大数据的4V特征： ?数据量大，TB->PB ?数据类型繁多，结构化、非结构化文本、日志、视频、图片、地理位置等；
上市公司，官网：https://www.360docs.net/doc/ae15415862.html, ?商业价值高，但是这种价值需要在海量数据之上，通过数据分析与机器学习更快速的挖掘出来； ?处理时效性高，海量数据的处理需求不再局限在离线计算当中。 现如今，正式为了应对大数据的这几个特点，开源的大数据框架越来越多，越来越强，先列举一些常见的： 文件存储：Hadoop HDFS、Tachyon、KFS 离线计算：Hadoop MapReduce、Spark 流式、实时计算：Storm、Spark Streaming、S4、Heron K-V、NOSQL数据库：HBase、Redis、MongoDB 资源管理：YARN、Mesos 日志收集：Flume、Scribe、Logstash、Kibana 消息系统：Kafka、StormMQ、ZeroMQ、RabbitMQ 查询分析：Hive、Impala、Pig、Presto、Phoenix、SparkSQL、Drill、Flink、Kylin、Druid 分布式协调服务：Zookeeper 集群管理与监控：Ambari、Ganglia、Nagios、Cloudera Manager 数据挖掘、机器学习：Mahout、Spark MLLib 数据同步：Sqoop 任务调度：Oozie 1.1 学会百度与Google
2018初级会计考试《 经济法》基础知识点笔记整理版.
《经济法基础》知识点汇总 第一章 2017年初级会计职称《经济法基础》知识点：法的本质与特征 1.法的本质 法是统治阶级的国家意志的体现。 （1）法只能是“统治阶级”意志的体现； （2）法是由统治阶级的物质生活条件决定的，是社会客观需要的反映； （3）法体现的是统治阶级的“整体意志和根本利益”，而不是统治阶级每个成员个人意志的简单相加； （4）法体现的不是一般的统治阶级意志，而是统治阶级的“国家意志”。 2.法的特征 （1）法是经过国家制定或者认可才得以形成的规范，具有“国家意志性”。 （2）法是凭借国家强制力的保证而获得普遍遵行的效力，具有“强制性”。 （3）法是确定人们在社会关系中的权利和义务的行为规范，具有“利得性”。 （4）法是明确而普遍适用的规范，具有“规范性”。 【注意】本质与特征是一回事，无需特别区分。
2017年初级会计职称《经济法基础》知识点：法律事实概念：法律事实是法律关系发生、变更和消灭的直接原因。 分类标准：是否以当事人的意志为转移 类别：法律事件和法律行为 （一）法律事件（不以当事人的意志为转移） 1.自然现象（绝对事件）：地震、洪水、台风、森林大火等自然灾害+生、老、病、死及意外事故。 2.社会现象（相对事件）：战争、重大政策的改变等。 【注意】法律事件的出现不以当事人的意志为转移，具有不可抗力的特征。 （二）法律行为（以当事人的意志为转移） 【注意2】请大家重点掌握“法律事件”与“法律行为”的区分，并看清题目问法。 【注意3】法律行为的反向问法，例：订立遗嘱是合法行为、积极行为、意思表示行为、单方行为、要式行为、自主行为。
2017年初级会计职称《经济法基础》知识点：仲裁裁决 1.仲裁管辖权 仲裁不实行级别管辖和地域管辖，由当事人协议选定仲裁委员会。（自愿原则、独立仲裁原则） 2.仲裁庭的组成 仲裁庭由3名或者1名仲裁员组成。 （1）当事人约定由3名仲裁员组成仲裁庭的，应当各自选定或者各自委托仲裁委员会主任指定1名仲裁员，第3名仲裁员由当事人共同选定或者共同委托仲裁委员会主任指定，第3名仲裁员为首席仲裁员。 （2）当事人约定由1名仲裁员成立仲裁庭的，应当由当事人共同选定或者共同委托仲裁委员会主任指定。（公平合理原则） 3.回避制度（公平合理原则） （1）是本案当事人，或者当事人、代理人的近亲属； （2）与本案有利害关系； （3）与本案当事人、代理人有其他关系，“可能影响公正仲裁”的； （4）私自会见当事人、代理人，或者接受当事人、代理人的请客送礼的。 4.仲裁应开庭但不公开（自愿原则）
《初级经济法基础》快速记忆口诀53418
《初级经济法基础》快速记忆口诀、 需要押题题库可以找群主雨石购买押题押题押题 消费税~~~~三男三女去开车 三男：烟、酒及酒精、鞭炮焰火 三女：化妆品、护肤护发品、贵重首饰及珠宝玉石 去开车：小汽车、摩托车、汽车轮胎、汽油柴油 记入管理费的四个税金~~~~等我们有钱了，我们就可以有房有车有地有花 有房：房产税 有车：车船使用税 有地：土地使用税 有花：印花税 可抵扣的三个不同的税率 运费：7%，废旧物资：10%，向农业生产者购入的免税农产品13% 今日好运气（7） 出门拾(10)废品 拾了13个农产品 所得税里面,关于业务招待费的扣除比例是:1500万及以下5%。，1500万以上3%。 顺口溜：下午（5%。）上山(3%。)当招待１５００净收入 汇票的绝对应记载事项为：（1）表明“汇票”的字样；（2）无条件支付的委托；（3）确定的金额；（4）付款人名称；（5）收款人名称；（6）出票日期；（7）出票人签章。 在记忆过程中，我老是记错。后自己总结了一句话，再也没忘过。现贴出与大家一起分享：
出棋（出票日期）出章（出票人签章）作表样（表明“汇票”的字样）；收付（收、付款人名称）金额（确定的金额）无所谓（无条件支付的委托）个人所税率中无论是九级还是五级 这样说吧，所有的税率 我就是曾经记过一次，之后再没有查过书 从不相信有天才，但是方法却是关健 很多人头疼九级，五级 但是我却从没有翻书查看过那东西 你可以用以下的方法： 你打开九级表， 虽然很多数字，却极有规律 你千万不要横着一项一项背 如果这样你肯定很费精力 你纵列来看，则极有规律 你现在开始用我的方法试一下 三分钟后你问一下自己记住没有，这个东西还难吗 现在开始了~~~~~ 你纵着来看，第一纵列这样记： 5 2 5 2 4 6 8 10 10以上 第二列，这样记： 5 10 15 20 25 30 35 40 45
用Apache Spark进行大数据处理——第一部分：入门介绍
用Apache Spark进行大数据处理——第一部分：入门介绍 什么是Spark Apache Spark是一个围绕速度、易用性和复杂分析构建的大数据处理框架。最初在2009年由加州大学伯克利分校的AMPLab开发，并于2010年成为Apache的开源项目之一。与Hadoop和Storm等其他大数据和MapReduce技术相比，Spark有如下优势。 首先，Spark为我们提供了一个全面、统一的框架用于管理各种有着不同性质（文本数据、图表数据等）的数据集和数据源（批量数据或实时的流数据）的大数据处理的需求。 Spark可以将Hadoop集群中的应用在内存中的运行速度提升100倍，甚至能够将应用在磁盘上的运行速度提升10倍。 Spark让开发者可以快速的用Java、Scala或Python编写程序。它本身自带了一个超过80个高阶操作符集合。而且还可以用它在shell中以交互式地查询数据。 除了Map和Reduce操作之外，它还支持SQL查询，流数据，机器学习和图表数据处理。开发者可以在一个数据管道用例中单独使用某一能力或者将这些能力结合在一起使用。 在这个Apache Spark文章系列的第一部分中，我们将了解到什么是Spark，它与典型的MapReduce解决方案的比较以及它如何为大数据处理提供了一套完整的工具。 Hadoop和Spark Hadoop这项大数据处理技术大概已有十年历史，而且被看做是首选的大数据集合处理的解决方案。MapReduce是一路计算的优秀解决方案，不过对于需要多路计算和算法的用例来说，并非十分高效。数据处理流程中的每一步都需要一个Map阶段和一个Reduce阶段，而且如果要利用这一解决方案，需要将所有用例都转换成MapReduce模式。 在下一步开始之前，上一步的作业输出数据必须要存储到分布式文件系统中。因此，复制和磁盘存储会导致这种方式速度变慢。另外Hadoop解决方案中通常会包含难以安装和管理的集群。而且为了处理不同的大数据用例，还需要集成多种不同的工具（如用于机器学习的Mahout和流数据处理的Storm）。 如果想要完成比较复杂的工作，就必须将一系列的MapReduce作业串联起来然后顺序执行这些作业。每一个作业都是高时延的，而且只有在前一个作业完成之后下一个作业才能开始启动。 而Spark则允许程序开发者使用有向无环图（DAG）开发复杂的多步数据管道。而且还支持跨有向无环图的内存数据共享，以便不同的作业可以共同处理同一个数据。
Scala从基础到开发实战
Scala从基础到开发实战 对于进化缓慢的Java跟C++语言来说，目前Scala无疑更适应现代化特质的语言，语法简洁，同时兼备函数式编程与面向对象编程，具有令人耳目一新的编程范式。而运行在Java 虚拟机上的编译环境使得其具有很多的现有工具与类库，拥有快速的可靠的解释器和编译器。 本课程是Scala语言基础课程，面向没有或仅有少量编程语言基础的同学，当然，具有一定的Java或C、C++语言基础将有助于本课程的学习。在本课程内，将更注重scala的各种语言规则和应用，通过学习本课程能具备初步的Scala语言实际编程能力。 Scala最近的红火也得益于Spark分布式内存计算平台的兴起，由于其惊人的计算速度，Spark将要革命Hadoop的说法尘嚣日上，但学习Spark的一项瓶颈是其原生语言Scala并不为大众所熟知，即使是资深程序员，从未听说过Scala者大有人在，于是本门课程也可以称为Spark系列的前置课程，供深入学习大数据技术的同仁们进行热身运动。 课程大纲： 第一课：Scala介绍——如何安装Scala REPL、SBT、IDE，编写简单的Scala程序；函数式编程简介 第二课：Scala的class和object，Scala的变量、类的介绍 第三课：Scala的基本数据类型、控制语句 第四课：高阶函数、Currying、尾递归 第五课：数据结构：List、Map、Set 第六课：组合和继承 第七课：Trait 第八课：响应式编程介绍 第九课：Akka框架（一）——akka的基本用法 第十课：Akka框架（二）——actor的监控 第十一课：Akka框架（三）——网络编程 第十二课：Akka框架（四）——akka使用技巧
2018年《经济法基础》真题及答案
2018年《经济法基础》真题及答案 一、单项选择题 1、2017年7月1日，李某到甲公司工作，按月领取工资3000元。同年9月1日，甲公司与李某签订书面劳动合同。已知：当地月最低工资标准为1800元，当地上年度职工月平均工资为3500元。因未及时与李某签订书面劳动合同，甲公司应向其补偿的工资数额为( )。 A、7000元 B、1800元 C、3500元 D、3000元 【答案】D 【解析】用人单位自用工之日起超过1个月不满1年未与劳动者订立书面劳动合同，应当向劳动者每月支付2倍的工资。起算时间为用工之日起满1个月的次日，截止时间为补订书面劳动合同的前1日。 2、根据劳动合同法律制度的规定，对负有保密义务的劳动者，用人单位可以在劳动合同或者保密协议中与劳动者约定竞业限制条款，但竞业限制不得超过一定年限。该期限为( )。 A、1年 B、2年 C、3年 D、5年 【答案】B 【解析】从事同类业务的竞业限制期限，不得超过2年。 3、甲贸易公司位于市区，实际占地面积为5000平方米，其中办公区占地4000平方米，生活区占地1000平方米。甲贸易公司还有一个位于农村的仓库，实际占地面积为1500平方米。已知城镇土地使用税适用税率每平方米税额为5元，计算甲贸易公司全年应缴纳城镇土地使用税税额的下列算式中，正确的是( )。 A、5000×5=25000元 B、(5000+1500)×5=32500元 C、(4000+1500)×5=27500元 D、4000×5=20000元 【答案】A 【解析】城镇土地使用税是国家在城市、县城、建制镇和工矿区范围内，对使用土地的单位和个人，以其实际占用的土地面积(生产、办公及生活区)为计税依据，按照规定的税额计算征收的一种税。征税范围不包括农村。 4、根据支付结算法律制度的规定，下列支付工具中，可以透支的是( )。 A、储值卡 B、信用卡 C、储蓄卡 D、预付卡 【答案】B 【解析】信用卡可以透支。 5、2017年12月甲啤酒厂生成150吨啤酒，销售100吨，取得不含增值税销售额30万元、增值税税额5.1万元。甲啤酒厂当月销售啤酒消费税计税依据为( )。 A、35.1万元 B、30万元
初级经济法基础的知识点复习考点归纳总结最终版
法是“统治阶级”的“国家意志”的体现，这是法的本质。（1）法只能是“统治阶级”意志的体现，是由统治阶级的物质生活条件决定的，是社会客观需要的反映。（2）法体现的是统治阶级的“整体意志和根本利益”，而不是统治阶级每个成员个人意志的简单相加。（3）法体现的不是一般的统治阶级意志，而是统治阶级的“国家意志”。 法的特征：（1）法是经过国家制定或者认可才得以形成的规范，具有国家意志性。（2）法是凭借国家强制力的保证而获得普遍遵行的效力，具有强制性。（3）法是确定人们在社会关系中的权利和义务的行为规范，具有利导性（利益导向性）。（4）法是明确而普遍适用的规范，具有规范性。 法律关系的主体：（1）公民（自然人）（2）机构和组织（法人）①国家机关，包括国家权力机关（立法机关）、国家行政机关和国家司法机关；②各种企业事业组织；③各政党和事业团体。（3）国家（4）外国人和外国社会组织 法律关系的内容：（1）法律义务包括积极义务（纳税、服兵役）和消极义务（不得毁坏公共财物、不得侵害他人生命财产安全）。（2）任何一方的权利都必须有另一方义务的存在，没有无义务的权利，也没有无权利的义务。（3）法律上的权利和义务，都受国家法律保障。 法律关系的客体：（1）物①自然物：土地、森林②人造物：机器、建筑③货币和有价证券（2）非物质财富①知识产品：著作、发明②道德产品：荣誉称号、嘉奖表彰（3）行为①生产经营行为；②经济管理行为；③提供一定劳务的行为（保管合同中的保管行为）； ④完成一定工作的行为（建设工程合同中承包人完成的建设项目）。（4）人身 法律事实：1、法律事件：（1）自然现象（绝对事件）：水灾、地震、台风等自然灾害（2）社会现象（相对事件）：战争、重大政策的改变2、法律行为 法的形式：1、宪法（具有最高的法律效力）：全国人民代表大会2、法律（法律效力仅次于宪法）（1）基本法律：全国人民代表大会（2）其他法律：全国人民代表大会常务委员会3、行政法规（次于宪法和法律，高于地方性法规）：国务院4、地方性法规：地方人大及其常委会5、自治法规：民族自治地方的人民代表大会6、特别行政区的法7、行政规章（1）部门规章：国务院所属部委（2）政府规章：地方人民政府8、国际条约 法的分类：1、根据法的创制方式和发布形式：成文法和不成文法（习惯法）2、根据法的内容、效力和制定程序：根本法（宪法）和普通法3、根据法的内容：实体法和程序法4、根据法的空间效力、时间效力或者对人的效力：一般法和特别法5、根据法的主体、调整对象和形式：国际法和国内法【解释】《税收征收管理法》属于成文法、普通法、程序法、一般法、国内法。 法律部门与法律体系：1、一个国家的现行法律规范划分为若干法律部门，由这些法律部门组成的具有内在联系的、互相协调的统一整体即为法律体系。2、法律部门划分的标准首先是法律调整的对象，即法律调整的社会关系。 仲裁的适用范围（1）属于《仲裁法》调整的争议：合同纠纷和其他财产纠纷（2）不属于《仲裁法》调整的争议①与人身有关的婚姻、收养、监护、抚养、继承纠纷；②行政争议； ③劳动争议；④农业承包合同纠纷。 仲裁的基本原则（1）自愿原则：当事人采用仲裁方式解决纠纷，应当双方自愿，达成仲裁协议。没有仲裁协议，一方申请仲裁的，仲裁委员会不予受理。（2）依据事实和法律，公平合理地解决纠纷的原则，仲裁要坚持以事实为依据，以法律为准绳的原则。在法律没有规定或者规定不完备的情况下，仲裁庭可以按照公平合理的一般原则来解决纠纷。（3）独立仲裁原则仲裁机构不依附于任何机关而独立存在，仲裁依法独立进行，不受任何行政机关、社会团体和个人的干涉。（4）一裁终局制度：仲裁庭作出的仲裁裁决为终局裁决，仲裁裁决作出后，当事人就同一纠纷再申请仲裁或向人民法院起诉的，仲裁委员会或者人民法院不予受理。 仲裁委员会：（1）仲裁委员会的独立性：仲
大数据技术Spark基础实验指导书
实验一Scala部署及基本语法 (5) 1. 安装Scala (6) 1.1 进入安装目录 (6) 2. Scala基础 (7) 2.1 基础语法 (7) 2.2 控制结构 (11) 实验二Scala数据结构 (13) 3. Scala数据结构 (14) 3.1 列表 (14) 3.2 集合 (14) 3.3 映射（Map） (15) 3.4 迭代器 (17) 实验三Scala类和对象 (20) 4. 类 (21) 4.1 简单的类 (21) 5. 对象 (24) 5.1 单例对象 (25) 5.2 伴生对象 (25) 5.3 应用程序对象 (26) 实验四Scala函数式编程WordCount (27) 6. 实验操作 (29) 6.1 创建需要统计的目录 (29) 实验五spark安装部署 (31) 1、检查环境hadoop集群环境 (31) 2、Spark部署 (32) 1
实验六Spark RDD编程 (45) 1.RDD编程 (46) 实验七Spark单词统计实验 (47) 2、检查hadoop集群环境 (49) 2、创建项目 (50) 2.1创建java maven项目 (51) 2.2更改JDK版本 (54) 2.3配置pom.xml文件 (58) 2.4创建SparkWordCount类 (64) 4、打包项目 (70) 5、运行打包好的jar程序 (76) 5.1 运行程序 (76) 实验八Spark Hbase读写实验 (77) 1、检查hadoop集群环境 (79) 2、Hbase创建studen表 (80) 2.1 进入hbase环境 (80) 2.2 查看表是否存在 (80) 2.3 创建student表 (81) 2.4 往表里插入数据 (81) 2.5 使用scan命令查看表结构 (82) 3、创建项目 (83) 3.1创建java maven项目 (84) 3.2更改JDK版本 (87) 3.3配置pom.xml文件 (91) 1
2017年初级会计职称经济法基础考试真题及答案
2017年初级会计职称经济法基础考试真题及答案单项选择题 每小题1.5分，每小题备选答案中，只有一个符合题意的正确答案，多选、错选、不选均不得分。 1(单项选择题)根据个人所得税法律制度的规定，下列各项中，暂减按10%的税率征收个人所得税的是( )。 A.周某出租机动车取得的所得 B.夏某出租住房取得的所得 C.林某出租商铺取得的所得 D.刘某出租电子设备取得的所得 【答案】B 解析根据个人所得税法律制度，财产租赁所得中个人出租居民住房减按10%的税率征收个人所得税。 2(单项选择题)甲房地产开发企业开发一住宅项目，实际占地面积12 000平方米，建筑面积24 000平方米，容积率为21。甲房地产开发企业缴纳城镇土地使用税的计税依据为( )。 A.24 000平方米 B.18 000平方米 C.36 000平方米 D.12 000平方米 【答案】D 3(单项选择题)根据税收征收管理法律制度的规定，下列税款中，由海关代征的是( )。 A.提供研发服务，但在境内未设有经营机构的企业应缴纳的增值税 B.进口货物的企业在进口环节应缴纳的增值税 C.从境外取得所得的居民应缴纳的个人所得税
D.在境内未设立机构、场所的非居民企业来源于境内的股息所得应缴纳的企业所得税 【答案】B 4(单项选择题)根据个人所得税法律制度规定，下列情形中，应缴纳个人所得税的是( )。 A.王某将房屋无偿赠予其子 B.杨某将房屋无偿赠予其外孙女 C.张某转让自用达5年以上且唯一家庭生活用房 D.赵某转让无偿受赠的商铺 【答案】D 5(单项选择题)根据企业所得税法律制度的规定，下列各项中，应以同类固定资产的重置价值为计税基础的是( )。 A.盘盈的固定资产 B.自行建造的固定资产 C.外购的固定资产 D.通过捐赠取得的固定资产 【答案】A 6(单项选择题)2016年7月甲公司开发住宅社区经批准共占用耕地150 000平方米，其中800平方米修建幼儿园，5 000平方米修建学校。已知耕地占用税适用税率为30元/平方米，计算甲公司应缴纳耕地占用税税额的下列算式中，正确的是( )。 A.150 000×30=4 500 000元 B.(150 000-800-5 000)×30=4 326 000元 C.(150 000-5 000)×30=4 350 000元 D.(150 000-800)×30=4 476 000元 【答案】B 7(单项选择题)根据社会保险法律制度规定，下列关于失业保险待遇，表述正确的( )。
利用Scala语言开发Spark应用程序
利用Scala语言开发Spark应用程序 park内核是由Scala语言开发的，因此使用Scala语言开发Spark应用程序是自然而然的事情。如果你对Scala语言还不太熟悉，可以阅读网络教程A Scala Tutorial for Java Programmers或者相关Scala书籍进行学习。 AD： Spark内核是由Scala语言开发的，因此使用Scala语言开发Spark应用程序是自然而然的事情。如果你对Scala语言还不太熟悉，可以阅读网络教程A Scala Tutorial for Java Programmers或者相关Scala书籍进行学习。 本文将介绍3个Scala Spark编程实例，分别是WordCount、TopK和SparkJoin，分别代表了Spark 的三种典型应用。 1. WordCount编程实例 WordCount是一个最简单的分布式应用实例，主要功能是统计输入目录中所有单词出现的总次数，编写步骤如下： 步骤1：创建一个SparkContext对象，该对象有四个参数：Spark master位置、应用程序名称，Spark安装目录和jar存放位置，对于Spark On Y ARN而言，最重要的是前两个参数，第一个参数指定为yarn-standalone ，第二个参数是自定义的字符串，举例如下： valsc=newSparkContext(args(0), WordCount ,System.getenv( SPARK_HOME ),Seq(System.getenv( SPARK_TEST_JAR ))) 步骤2：读取输入数据。我们要从HDFS上读取文本数据，可以使用SparkCon valtextFile=sc.textFile(args(1)) 当然，Spark允许你采用任何Hadoop InputFormat，比如二进制输入格式SequenceFileInputFormat，此时你可以使用SparkContext中的hadoopRDD函数，举例如下： valinputFormatClass=classOf[SequenceFileInputFormat[Text,Text]]varhadoopRdd=sc.hadoopRDD(c onf,inputFormatClass,classOf[Text],classOf[Text]) 或者直接创建一个HadoopRDD对象： varhadoopRdd=newHadoopRDD(sc,conf,classOf[SequenceFileInputFormat[Text,Text,classOf[Text],c lassOf[Text]) 步骤3：通过RDD转换算子操作和转换RDD，对于WordCount而言，首先需要从输入数据中每行字符串中解析出单词，水草玛瑙 https://www.360docs.net/doc/ae15415862.html,然后将相同单词放到一个桶中，最后统计每个桶中每个单词出现的频率，举例如下： valresult=hadoopRdd.flatMap{case(key,value)= value.toString().split( \\s+ }.map(word= (word,1)).reduceByKey(_+_) 其中，flatMap函数可以将一条记录转换成多条记录（一对多关系），map函数将一条记录转换为另一条记录（一对一关系），高山茶 https://www.360docs.net/doc/ae15415862.html, reduceByKey函数将key相同的数据划分到一个桶中，并以key为单位分组进行计算，这些函数的具体含义可参考：Spark Transformation。步骤4：将产生的RDD数据集保存到HDFS上。可以使用SparkContext中的saveAsTextFile哈数将数据集保存到HDFS目录下，默认采用Hadoop提供的TextOutputFormat，每条记录以（key,value）的形式打印输出，你也可以采用saveAsSequenceFile函数将数据保存为SequenceFile格式等，举例如下： result.saveAsSequenceFile(args(2)) 当然，一般我们写Spark程序时，需要包含以下两个头文件： importorg.apache.spark._importSparkContext._ WordCount完整程序已在Apache Spark学习：利用Eclipse构建Spark集成开发环境一文中进行了介绍，在次不赘述。 需要注意的是，指定输入输出文件时，需要指定hdfs的URI，比如输入目录是hdfs:hadoop-testtmpinput，输出目录是hdfs:hadoop-testtmpoutput，其中，hdfs:hadoop-test 是由Hadoop配置文件core- site.xml中参数https://www.360docs.net/doc/ae15415862.html,指定的，具体替换成你的配置即可。 2. TopK编程实例