大数据行业发展报告

14122135——黄江林

上海电影学院

早在20世纪90年代，互联网的发展改变了数据形态和应用规模，随着社会的发展，数据的规模从90年代末的百万数量级发展到2013年的上亿的数量级，进入了大数据时代。大数据规模庞大，对其进行整体和分析可以反映出许多有意义的信息，具有强大的洞察力，在很多方面可以有很好的应用，有“未来的生产要素之一”、“未来的新石油”之称。

1 大数据发展环境

欧美国家都相当重视大数据的发展，如英国、美国、德国等国家，都相继推出了一系列有利于国家大数据发展的。就我国而言，在2015年3月，制订了“互联网+”行动计划，同年5月，编制软件及大数据产业“十三五”规划，大数据产业第一次明确出现在规划中，9月印发《促进大数据发展行动纲要》，2016年4月，国家发表《促进大数据发展三年工作方案（2016—2018）》，这些举措皆旨在促进和规划大数据在我国的发展。

近两年云计算出现，“互联网+”概念的提出及初步实施，人工智能的发展热潮，都致使大数据发展迅速，大数据发展是否先进对一个国家这些方面发展好坏起到了至关重要的作用。

2 大数据发展现状

大数据渗透到各个行业的发展。全球七大重点领域内，包括教育、交通、消费、电力、能源、健康及金融，都形成了一定的数据规模，并且都有运用大数据分析信息的大量实例。

大数据行业增长迅速。2011-2014年，我国大数据市场规模分别为37.4亿元、47.3亿元、59亿元和75.7亿元，年平均复合增长约为27%。2016年我国大数据市场规模约为168亿元，较2015年增速达45%。2014年全球大数据市场规模达到3607.6亿美元，实现53.23%的增长，2016年增长率达57.51%，大数据市场的整体特点是规模大且增长迅速。

掌握大数据者成为行业发展龙头。虽然现在数据无处不在，但是对大数据的控制和使用实际上集中在少数大型企业中，如google和两大企业在各自强项领域内独占鳌头，分别占领了近50%的互联网用户，是世界互联网发展的龙头，阿里巴巴和百度占领了大部分我国的互联网市场，这些企业有一个共同的特征就是是大数据的掌控者，它们控制着这些信息的来源和使用，进而成为了行业的发展巨头，也是其他各行业数据的主要提供者。

3 大数据发展挑战

数据存储问题。大数据的发展，必然会面临着数据的存储问题，这么庞大的数据将如何有效、方便的存储是我们目前面临着的一个主要的问题。有很多的数据，我们并不能预测到数据将在未来的哪一个时间点会被利用，但是在此刻我们必须先保存下来以供以后使用，如何很快的剔除掉一些无用的数据也是我们目前需要解决的问题，目前企业有59%的数据是无效数据，需要更好的技术及原理将现状改观。

非结构化数据的处理问题。企业很长时间以来分析和运用的大部分是结构化数据，随着互联网、多媒体技术的发展，很多时候我们要对视频、图片等非结构化数据进行分析，如何对这些非结构化的数据进行收集处理，并且通过整合，可以智能的从这些非结构化的数据中得到我们想要的一些信息的技术，是发展的方向也是发展的难点。

数据分析问题。要从大规模的数据中得到有效的信息，必不可少有效的分析方法和分析技术，为了提高分析的效率，就需要用到智能分析，不需要过多的人工参与就可以得到我们想要的分析数据及初步的分析结果， 这是人工智能时代的特色，需要人们更多的投入。

4大数据发展趋势

中国成为全球最重要的大数据市场之一。未来5年，中国大数据产业规模年均增长率将超过50%，到2020年中国的数据总量将占全球数据总量比例的20%，成为世界第一数据资源大国和全球数据中心。

各行业将纷纷对大数据进行靠拢。大数据对市场信息的反映，使得各行业都可以有可利用的方面，想要在行业中取得发展，就必须利用最先进的资源，大数据将成为各行业重要的成产要素之一。

与大数据有关基础设施行业发展迅速。大数据的发展，离不开大数据的存储技术、大数据的计算技术、大数据的分析技术的发展，计算机智能技术、数据采集技术、云计算技术也不可或缺，针对大数据的一体化设备市场迅速增长，打包的大数据行业分析应用出现，云计算的需求持续增加，高性能的数据分析工具将出现以处理海量的数据。

更多公开的数据。和企业信息公开，一方面有利于对的监督和对的制定，及企业利用公布的信息制定商业发展策略，另一方面可以通过公开的企业信息对企业进行监督，了解企业发展状况而达到更好的治理效果。

将面向大型非结构化数据集开发新软件工具和数据库系统。越来越多的数据都是以非结构化数据的方式呈现的，非结构化数据的采集和分析将会成为大数据的主流，视频、图像、音频等格式的文件使数据类型多样化。大量面向大型非结构化数据集的新软件工具和数据库系统将会出现。

大数据推动软件公司的并购。大数据概念覆盖范围非常广，与大数据相关的软件厂商也非常多，在竞争如此激烈的市场上，大部分企业为了获得市场，一般都是取少数几个自己的强项发展，因此大型IT厂商将为了完善自己的大数据产品线进行并购。

利用大数据源营利，在市场上销售数据以实现所收集的数据的价值。在未来将会出现许多专门从事数据分析的公司，这一类公司只对数据进行分析而不对数据进行利用，而是将信息卖给有需要的企业而从中获得利益，实现所收集的信息的价值。

统计学扮演重要角色。要对数据进行分析，必先对采集的数据进行合适的统计，此时统计学将扮演重要的角色，不同的统计方法将会得出不同的分析结论，统计方法是否合理有效，是分析结论是否有效的重要因素。

加强对数据隐私和知识产权的关注力度。大数据的预测分析技术，更多的是通过了解用户、消费者或公民的个人信息来较准确地预测其具体需求和行为，这种方法的实行，便涉及到了公民的隐私权和知识产权，只有加强对数据隐私和知识产权的管理，才能保障在从这些大数据分析中得出有用信息的同时又不致使公民隐私信息和知识产权被非法利用。

参考文献(References)

[1]徐姗姗. 2020大数据产业将突破570亿元[N]. 通信产业报,2017-04-10(020).

[2]. 中国大数据产业发展现状报告[J]. 中国连锁,2017,(02):79-81.

[3]王立娜. 英国发布报告探索大数据相关发展趋势及其应用机遇[J]. 科研信息化技术与应用,2015,(02):86-87.

[4]林青. 大数据应用与文化发展趋势——《大数据大文化》研究报告述评[J]. 江西社会科学,2014,(03):247-255.

[5] Anwaar Ali, Junaid QadirEmail author, Raihan ur Rasool, Arjuna Sathiaseelan, Andrej Zwitter and Jon Crowcroft. Big data for development: applications and techniques[J]. Big Data Analytics,2016,(01):2.