大数据时代的机遇和挑战

【】First of all ，the paper makes a simple analysis

of the concept and characteristics of large data. Secondly ，it explores the opportunities and challenges that big data brings to all aspects of economic life. Finally ，it explores how to deal with opportunities and challenges ，and improve the development environment of big data. improve the environment for the development of big data ，so as to make a certain contribution to the economic development in the era of big data.

【Keywords】big data age ；quantitative economics ；application

1引言

“大数据”是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力来适应海量、高增长率和多样化的信息资产。被称为“第三次浪潮的华彩乐章”。近几年来，大数据吸引了越来越多的关注，

人们随时都能感觉到生活在一个日益信息化的世界中。随着网络技术的发展，越来越多的人使用社交软件进行网上聊天，发布个人心情状态，对网络中的信息进行评论，这些都极大的丰富了我们的生活。同时，网上每天都会产生大量的数据，根据有关统计，每天网络中大约出现220 万TB 的新数据，

而且这个速度还在不断增加

伴随着大数据时代的到来，数据资源越来越庞大，数据处理速度越来越快，人们可以通过大数据技术实现各种构想。学者能够利用大数据这一有利条件进行更加科学且贴近现实的经济研究。银行能够通过大数据考查企业的诚信状况，并决定是否放贷。而计算机则可以在海量的数据中统计分析出人的行为、习惯等方式，从而更好地学习模拟人类智能。随着科学技术的不断发展，未来大数据会发挥出更加强大的作用，

而如何应对大数据时代的机遇与挑战，有效利用大数据资源，是各行各业应关注的焦点。

2大数据时代的特点

大数据又可以称之为巨量资料，它的概念比较抽象，其定义是依靠互联网技术下的主流软件对一些规模较大、较复杂的资料进行处理、分析、管理，从而形成对经济发展更加有用的信息。大数据的主要特点就是信息量大、多样化、高速等。大数据的形成需要特殊专业的技术，例如互联网、数据挖掘电子网或者大规模并行处理数据库等软件，通过有效的掌握丰富的数据资源，并对这些数据进行专业化的处理，从而在经济社会的发展中实现盈利，把对大数据的处理加工有效的转变为信息资

产。随着时代的不断发展与变化，大数据技术逐渐深入到企业的营销、风险预测、客户服？盏确矫妗F渥魑？一个开放的平台，无论是个人或者是企业都可以利用其获得丰富的数据资源，同时向数据库中不断提供更加新鲜的数据资料。通过运用大数据技术，企业能够提高市场敏锐度，并通过对未来经济走势的准确预测，调整、部署下一步的发展战略，从而使企业能够实现可持续发展[1] 。

大数据数量庞大且内容复杂，数据包括声音信息、图像信息、文字信息和视频信息等大量信息。另外，随着网络发展越来越迅速，在生活各个方面都得到了广泛的应用，造成了数据的来源及其广泛，能够体现生活中各个方面的信息，而且这些信息量以极快速度不断在增加。这些都给数据库的实现在硬件和软件技术上带来了重大的挑战。

3大数据时代带来的机遇和挑战数据科学将成为一门专门的学科，被越来越多的人所认知。就像计算机和互联网一样，大数据很有可能是新一轮的技术革命。随之兴起的数据挖掘、机器学习和人工智能等相关技术，可能会改变数据世界里的很多方法和基础理论，实现科学技术上的突破。大数据将成为重要的战略资源，而大数据利用将成为提高核心竞争力的关键因素。

但大数据时代同样带来挑战。要对数据进行存储，就必须要有相关存储设备，因此，需要考虑设备的存储性能，主要包括设备的存储容量，存储空间的可扩展性，读取存储数据的速度；随着数据量的不断增加，在数据存储中，如何确保数据不丢失并保持一致性成为关键问题，这表明需要解决数据量不断积累的问题；数据库中的数据来源世界各地和

生活中的各个层面，随着人们活动的改变，数据也不断发生着改变，所以，数据也存在一定的生命周期，即随着某些事件的变化，有些数据可能不在适用，所以，数据存在延迟问题；在数据库技术中，我们应重点关注所获取的数据安全问题，因为数据主要来源于网络，而网上很多信息可能是随意发布，缺乏真实性，数据的流动量越来越大，数据信息的保密和个人信息的泄露面临着巨大的挑战，我们需要根据重要程度对数据进行相关保护，比如国家安全信息，金融行业信息等，就需要设置极高的安全级别。

4优化完善大数据发展环境的应对措施

4.1 排除干扰因素，加大数据挖掘的深度数据规模越大，处理难度越大，大数据技术虽然具有相当庞大的功能，但其也具有一个非常明显的缺点，即数据的深度不足。为了能够分析数据之间的复杂联系，需要加强数据挖掘的深度，并且发现数据之间的因果关系。依托各种假设，通过不断排除干扰项来发现微小变化对经济发展趋势的影响。然而在社会发展过程中，实际上干扰因素很多，都对经济的发展造成了一定的影响，如果突然出现不可控的影响因素，会导致经济发展趋势逐渐无法控制[2] 。在这样的背景下，如果利用科学合理的大数据技术，对事物之间的内在联系进行一定的分析，很快就可以寻找到导致问题出现的具体原因，重新建立经济模型，节约了大量的时间与精力。4.2 建立丰富的数据资源库，使经济模型更加准确

在大数据背景下，我们可以借助于大数据技术能够做到的事情更多。但我们对数据保存还不够重视，对存储数据的利用率也不高，如果选取的数据不够多，往往会使得经济模型难以全面预测经济发展趋势，

而如果建立一个具有丰富数据资源量的数据库，大数据技术就能够得到有效地利用。在短短几周或者几天的时间内得到海量数据，建立需要的经济模型，进行大胆的预测。大数据技术通过对海量数据的快速收集与挖掘、及时研判与共享，成为支持社会治理科学决策和准确预判的有力手段，为经济社会的发展带来契机。

充分利用数据，合理推进数据库应用建设，主要可以从以下几个方面入手：第一，在需要大量数据的相关行业（如金融、电信、医疗等），可以与相关数据库技术公司进行合作，通过数据库技术对数据进行存储和分析，从而对数据进行预测，推动相关行业的发展。第二，大数据技术可以在城市建设中得到应用，通过数据的利用，实现城市生活智能化，推动智能化软件升级和智能化产品的应用。第三，数据库技术能够推动高新科技的发展，比如天气的预测需要对大量以往的数据进行处理，因此，可以根据行业特点，建立专门的数据库，通过数据分析带动技术不断前进，提供有特点的数据服务。第四，对重要企业的数据进行分析，消除其无关数据，减少存储量，通过过滤和去重，提取重要的数据信息。

4.3 培养大数据人才目前大数据人才的缺口很大，这将严重阻碍大

数据的发展，

大数据建设的每个环节都需要依靠专业人员才能完成，因此，必须培养和造就一批熟悉大数据技术、熟练掌握数理统计、数据分析、计算机语言等多方面知识、具有丰富应用经验的大数据专业复合型人才。未来，大数据应用方面将会出现数以百万计的人才缺口，在各个行业中，大数据中高端人才都会成为炙手可热的人才，如数据开发工程师、大数据分析师、大数据后台开发工程师等。因此需要高校和企业共同努力