大数据概述
1、大数据对思维方式的重要影响
大数据时代最大的转变就是思维方式的3种转变:全样而非抽样、效率而非精确、相关而非因果。
1.1、全样而非抽样
大数据时代中全样而非抽样的转变就是指在大数据时代中所得到的数据不是随机样本而是全体数据。随着计算机技术的进步,得到并分析大数据成为可能,大数据较之以往的统计样本就是全数据,并具有规模大、种类繁多、处理速度要求高的三个特征。大数据技术的核心就是海量数据的存储和处理,分布式文件系统和分布式数据库技术提供了理论上接近无限的数据存储能力,分布式并行编程框架MapReduce提供了强大的海量数据并行处理能力。
1.2、效率而非精确
大数据时代中效率而非精确的转变就是指在大数据时代中所得到的数据不是具有精确性的而是具有混杂性的。这种思维方式的改变可以解决以往技术无法解决一些问题,例如实时性、大范围和并行处理等一些以往相对来说比较难以处理的问题。同时也带来新的洞见,大数据时代中的数据是用概率说话,而并不是就细节较真。这个观念是,希望先解决80%的趋势问题,然后慢慢精细化。
1.3、相关而非因果
大数据时代中相关而非因果的转变就是指在大数据时代中所得到的数据并不是具有因果关系而是具有相互关系的。中国人长久以来的思维习惯是关注“是什么”而不是“为什么”,人们并不追求其内在的原理以及机理,而是重点关注它的结果和趋势,就像人们使用计算机一样,不必在意计算机的工作原理,内部的电路分布,只需要输入指令,就能得到想要的结果。
大数据时代是信息社会运作的必然结果。正是因为大数据时代的来临,人类的信息社会更上一个台阶。在传统农业社会时人们以土地为核心资源,一直到处于工业时代时转为能源,最后到信息社会则将会变更为数据。谁掌握数据,以及数据分析方法,谁就将在这个大数据时代胜出,无论是商业组织,还是国家文明。
2、大数据、云计算、物联网之间的区别与联系
2.1、区别
大数据是一种规模大到在获取、存储、管理、分析方面大大超出了传统数据库软件工具能力范围的数据集合,具有海量的数据规模、快速的数据流转、多样的数据类型和价值密度低四大特征。
云计算是基于互联网的相关服务的增加、使用和交付模式,通常涉及通过互联网来提供动态易扩展且经常是虚拟化的资源。
物联网是利用局部网络或互联网等通信技术把传感器、控制器、机器、人员和物等通过新的方式联在一起,形成人与物、物与物相联,实现信息化、远程管理控制和智能化的网络。
总的来说,大数据代表了互联网的信息层,是互联网智慧和意识产生的基础。云计算是互联网的核心硬件层和核心软件层的集合,也是互联网中枢神经系统萌芽。物联网对应了互联网的感觉和运动神经系统。
2.2、联系
大数据与云计算的关系就像一枚硬币的正反面一样密不可分。大数据必然无法用单台的计算机进行处理,必须采用分布式架构。它的特色在于对海量数据进行分布式数据挖掘,但它必须依托云计算的分布式处理、分布式数据库和云存储、虚拟化技术。物联网、移动互联网再加上传统互联网,每天都在产生海量数据,而大数据又通过云计算的形式,将这些数据筛选处理分析,提前出有用的信息,这就是大数据分析。所以说,大数据、云计算、物联网和互联网都是密切相关的,国家大力倡导发展大数据产业,主要归结于互联网、移动设备、物联网和云计算等快速崛起,全球数据量大大提升。
3、我对大数据应用与发展的看法,以及我在这次大数据浪潮中想扮演的角色
大数据时代的到来的时代必然的趋势,在未来的发展中,大数据必然会越来越深入到我们普通人的生活中来,在给我们带来巨大的便利的同时,也会也我们带来一些不可避免的烦恼,例如,大数据对于人工智能的深度普及以及科技深入生活必然会带来必不可少的动力。但是,大数据的到来也会使得我们的网上隐私越来越少,一些不法分子可以轻易地从一些数据中分析出我们每一个人的一些行为习惯以及思维习惯,会给我们的安全带来不少的困扰,但是这些问题也是可以通过一些手段来减少的。
在此次大数据浪潮中,我觉得我们不应该不只是作为这亿万数据的提供者,成为这亿万数据中的一员,而是要自己把握掌控数据,成为这亿万数据的使用者,合理使用这些数据,为我们的人生下一步做出更好的规划。