五分钟解读“大数据”

作者: 小枣君

来源: 鲜枣课堂

发布日期: 2019-01-10 11:19:33

本文详细介绍了大数据的定义、特点、级别、来源、价值以及与云计算和物联网的关系,并指出了大数据面临的挑战,特别是数据安全问题。

大家好,今天,我们来聊聊大数据。这些年,大数据作为一个时髦概念,出现频率很高,关注度也很高。对于很多人来说,当他第一次听到“大数据”这个词,会自然而然从字面上去理解——认为大数据就是大量的数据,大数据技术就是大量数据的存储技术。但是,事实并非如此。大数据比想象中复杂。它不只是一项数据存储技术,而是一系列和海量数据相关的抽取、集成、管理、分析、解释技术,是一个庞大的框架系统。

更进一步来说,大数据是一种全新的思维方式和商业模式。

首先,还是要重新审视大数据的定义。行业里对大数据的定义有很多,有广义的定义,也有狭义的定义。广义的定义,有点哲学味道——大数据,是指物理世界到数字世界的映射和提炼。通过发现其中的数据特征,从而做出提升效率的决策行为。狭义的定义,是技术工程师给的——大数据,是通过获取、存储、分析,从大容量数据中挖掘价值的一种全新的技术架构。

我们传统的个人电脑,处理的数据,是GB/TB级别。例如,我们的硬盘,现在通常是1TB/2TB/4TB的容量。而大数据是什么级别呢?PB/EB级别。大部分人都没听过。其实也就是继续翻1024倍:1 PB = 1024 TB (PB - petabyte),1 EB = 1024 PB (EB - exabyte)。

数据的增长,为什么会如此之快?说到这里,就要回顾一下人类社会数据产生的几个重要阶段。大致来说,是三个重要的阶段。第一个阶段,就是计算机被发明之后的阶段。尤其是数据库被发明之后,使得数据管理的复杂度大大降低。各行各业开始产生了数据,从而被记录在数据库中。第二个阶段,是伴随着互联网2.0时代出现的。第三个阶段,是感知式系统阶段。

行业里对大数据的特点,概括为4个V。前面所说的庞大数据体量,就是Volume(海量化)。除了Volume之外,剩下三个,分别是Variety、Velocity、Value。

大数据的价值主要来自于两个方面:1 帮助企业了解用户,2 帮助企业了解自己。大数据,就是为决策服务的。

大数据和云计算之间,到底有什么关系?可以这么解释:数据本身是一种资产,而云计算,则是为挖掘资产价值提供合适的工具。

大数据和物联网有什么关系?这个问题我觉得大家应该能够很快想明白,前面其实也提到了。物联网就是“物与物互相连接的互联网”。物联网的感知层,产生了海量的数据,将会极大地促进大数据的发展。

大数据也面临着很多挑战。除了数据管理技术难度之外,大数据的最大挑战,就是安全。

来源:鲜枣课堂(ID:xzclasscom)

UUID: e40f062d-e50b-446c-9bca-b0fe9cdf2520

原始文件名: /home/andie/dev/tudou/annot/AI语料库-20240917-V2/AI语料库/中科院物理所公众号-pdf2txt/2019/中科院物理所_2019-01-10_五分钟解读“大数据”.txt

是否为广告: 否

处理费用: 0.0059 元