内容正文:
1.5数据与大数据
1
1
1.5.1大数据的概念
2
1.5.2大数据的特征
目录 Contents
3
1.5.3大数据思维
4
1.5.4大数据对社会的影响
2
3
1.5.1大数据的概念
第 ‹#› 页
4
1.5.1大数据的概念
某地交通密集路口发生了一起严重的交通事故,交警调取了这起事故的视频画面,但有效的视频画面仅仅有十几秒钟。
第 ‹#› 页
5
1.5.1大数据的概念
道路监控摄像头24小时不间断地记录着视频数据,根据第3节中图像数据的计算公式,引入帧频参数进行计算,对于1个720p(1280×720像素、24位色)的高清摄像头,按25FPS拍摄,可以计算出每秒的数据量,乘以86400秒就是1天的数据量。若按200: 1的压缩比进行存储,大致可以估算出1个720p高清摄像头1天产生的数据量。
位图图像(BMP)存储空间的计算机公式:
存储容量=总像素X颜色位深度(单位:bit)总像素=水平像素X垂直像素
存储容量=每张图片的大小X频率X时间(单位:bit)
视频存储空间的计算机公式:
第 ‹#› 页
一天(86400秒):1280*720*24*25*86400/(8*1024*1024*1024*1024)≈5.4TB
1分钟(60秒):1280*720*24*25*60/(8*1024*1024*1024*)≈3.86GB
60÷86400=1/1440
6
1.5.2大数据的特征
继移动互联网、云计算之后,大数据正在引发信息科技产业新的变革,并已经开始对社会的组织结构、国家治理模式、企业决策架构以及个人生活方式产生深刻影响。
早在几十年前,在“信息爆炸”“知识爆炸”的表述中,就已经对数据的大规模增长有所认识。20 世纪90年代末,随着数据处理技术的发展,“大数据”的概念首次由美国硅图公司(SGI)的一位科学家正式提出。2016年,数据科学家将大数据正式定义为:大数据代表着信息量大、速度快、种类繁多的信息资产,需要特定的技术和分析方法将其转化为价值。也就是说,大数据之“大”,不仅指规模、速度和种类的特征,还意味着它超出以往常用的数据采集、组织、管理和加工等软件的处理能力,要求新型集成技术从多元、复杂和巨量规模的数据集里洞察规律。
第 ‹#› 页
7
1.5.2大数据的特征
第 ‹#› 页
8
1.5.2大数据的特征
一个有意思的比喻