原创《大数据概念、时代背景应用概述》：本论文为免费优秀的关于概述论文范文资料，可用于相关论文写作参考。
随着云计算、物联网、互联网的高速发展,大数据（Big Data）吸引了众多眼球,成为近幾年社会发展的焦点.本文首先从大数据的概念入手,接着阐述了大数据的时代背景,然后对传统数据库和大数据进行了比较,进而剖析了大数据的代表技术及应用研究.旨在了解大数据当前发展状况,为以后进行大数据分析和处理提供参考.
一、大数据概念
大数据的4个“V”：Volume,数据体量巨大,从TB级别,跃升到PB级别；Variety,数据类型繁多；Veracity,数据的准确性和真实性；Velocity处理速度快.
广义上来说大数据已经不再局限于技术领域.如今,大数据除了为应对长期存在的业务挑战提供解决方案之外,还为流程、组织、整个行业、甚至社会本身的转型激发了许多新的方式.狭义上来说大数据泛指数据集的大小,产生的速度和数据类型超过了通常的数据库,数据管理软件在限定的时间范围内所能获取,存储,管理和分析的范畴.
二、大数据的时代背景
2008年9月,《NATURE》杂志推出了名为“SPECIALS： Big Data”的专栏；12月,计算机社区联盟发布《Big Data Computing： Creating Revolutionary Breakthroughs in Commerce, Science, and Society》这个报告,阐述了在数据驱动背景下解决大数据问题所需的技术以及面临的一些挑战.EMC 公司于2011年举办的EMC World大会上提出当年的主题是“云计算相遇大数据”；2012年5月,联合国对外发布了《Big Data for Development： Challenges and Opportunities》白皮书,探讨如何利用互联网产生的大数据推动全球发展.
三、传统数据库和大数据的比较
传统的数据库存储数据采用的都是结构化,在过去的很长一段时间中,关系型数据库（RDMS）一直是最主流的数据库解决方案,他运用真实世界中事物和关系来解释数据库中抽象的数据架构.使用的数据库系统有Oracle、MySQL、DB2、SQL Server等.
然而,在信息技术爆炸式发展的今天,大数据已经成为了继云计算、物联网后新的技术革命,关系型数据库在处理大数据量时已经开始吃力,开发者只能通过不断地优化数据库来解决数据量的问题,但优化毕竟不是一个长期方案,所以人们提出了一种新的数据库解决方案来迎接大数据时代的到来——NoSQL.处理非关系型数据使用的数据库管理系统最多的是MongoDB,MongoDB尽可能精简数据库,将尽可能多的操作交给客户端.
四、大数据的代表技术
(一)Hadoop
Hadoop它来源于Google的一个编程模型包,目前,已经有很多公司开始提供基于Hadoop的培训、服务,它有高可靠性、高扩展性、高效性、高容错率、低成本等优点,所以用户可以轻松在在Hadoop上编写程序.
(二)NoSQL
随着互联网的发展,传统的关系数据库已经无法满足非结构化大数据的存储和处理,显得力不从心,NoSQL数据库就是为了解决非结构化大数据带来的种种挑战,是一项全新的数据库革命.
(三)Streaming
Streaming是一种流动传动数据技术,即客户机接收的数据变成流,源源不断,客户机看到的图片不受任何影响,完全可以在整个文件传送完之前浏览屏幕上的文件.
五、大数据的应用研究
(一)大数据的采集
采集的结构化数据包括生产报表、经营报表等具有关系特征的数据；非结构化数据,主要包括网页（ HTML）、格式文档（Word、PDF）、文本文件（Text）等文字性资料.这些数据目前可以通过关系数据库和专用的数据挖掘软件进行挖掘采集.特别是非结构化数据,如D 相关的各种动态等信息对D 分析研究十分重要,综合运用定点采集等搜索技术.
(二)大数据的导入
将这些来自前端的数据导入到一个集中的大型分布式数据库或者分布式存储集群,并且做一些简单的清洗和预处理工作,也可以使用Storm技术来对数据进行流式计算.导入和预处理过程的特点和挑战主要是导入的数据量大,每秒钟的导入量经常会达到百兆,甚至千兆级别.
(三)大数据的存储和管理
随着数字图书馆、电子商务、多媒体传输等不断发展,数据从GB、TB到PB量级海量急速增长.存储设备不仅仅局限于单一的控制界面,同时,也对数据的精简提出了要求.根据这些衍生的问题,重复数据删除和自动精简配置这两项技术呼之欲出.针对海量数据存储,目前主要开展了虚拟存储技术、高性能I/O、网格存储系统等这些方面的研究.
(四)大数据的应用实例
最经典的大数据应用实例当属名为 “Google流感趋势” 的工具；比如广东移动基于数据挖掘的数据业务精确营销,增加了数据业务收入,有力地促进了业务收入KPI指标的完成,促进了彩信、手机等业务的用户增长,降低了彩铃客户的流失率,为重点业务用户数的KPI指标完成做出重要贡献；洛杉矶 局和加利福尼亚大学合作利用大数据预测犯罪的发生.
六、结语
大数据给人们带来了便利,同时也给了人们一种发掘数据的挑战.马云在2017世界物联网无锡峰会上发言中说：“大数据是重要的生产资料,涵盖两个关键：大计算和云数据,也就是强大的计算能力和从云端可取的大量数据.物联网和云计算大数据,合在一起才是真正的未来.” 麦肯锡预测未来中国大数据产品的潜在市场规模有望达到1.57万亿元,给IT行业开拓了一个新的黄金时代.（作者单位为郑州财经学院）
概述论文参考资料：
结论：大数据概念、时代背景应用概述为适合不知如何写概述方面的相关专业大学硕士和本科毕业论文以及关于什么是概述论文开题报告范文和相关职称论文写作参考文献资料下载。
