内容正文:
BIG DATA
5.1 认识大数据
第五章
REN · SHI · DA · SHU · JU
”
授课人:XXX
在生活中是否有类似被“监视”、说了啥就会被推送啥的经历?
询问学生是否在生活中类似被“监视”、说了啥就会被推送啥的经历,调动学生的学习兴趣,说明其背后隐含着大数据技术的使用,并引入对大数据的学习。
2
大数据
大数据的特征
大数据对日常生活的影响
3
ONE
大数据
01
知识回顾
1.什么是“数据”?
2.手机微信APP中的下列哪些项目是数据。( )
① 好友发送的聊天语音 ② 付款码
③ 微信头像图片 ④ 账户余额数字 ⑤ 每天的运动步数
A. ①②③ B. ④⑤
C. ③④⑤ D. ①②③④⑤
数据是现实世界客观事物的符号记录,是信息的载体,是计算机加工的对象。
D. ①②③④⑤
D
5
大数据
“数据”?
大
数据量大
只是数据量大吗?
6
数据集合,信息资产
大数据的概念
大数据是指无法在可承受的时间范围内用常规软件工具进行高速捕捉、管理和处理的数据集合,
是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样性的信息资产。
7
海量、高增长率和多样性
大数据的概念
大数据是指无法在可承受的时间范围内用常规软件工具进行高速捕捉、管理和处理的数据集合,
是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样性的信息资产。
大数据是数据集合,是信息资产
8
大数据的概念
海量、高增长率和多样性
大数据是指无法在可承受的时间范围内用常规软件工具进行高速捕捉、管理和处理的数据集合,
是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样性的信息资产。
大数据是数据集合,是信息资产
9
大数据的例子
截止2021年9月末,月活跃用户数
We
Chat
微信
12.6亿
例1:使用微信产生的数据
数据来源于《2022微信视频号生态发展研究报告》
10
大数据的例子
例2:天气预报
天气预报活动,各类的传感器每时每刻在产生大量的数据
11
大数据的例子
例3:疫情大数据(健康码、行程码)
通信大数据
12
TWO
大数据的特征
02
大数据的特征
从互联网产生大数据的角度
1
从互联网思维的角度
2
从大数据存储与计算的角度
3
”
”
第三个角度略讲,在课堂练习的相关习题中再结合着讲解
14
大数据的特征——从互联网产生大数据的角度
请结合教材P102“从互联网产生大数据的角度来看···”的内容,阅读以下4则案例,尝试分析大数据具有的特征。
15
大数据的特征——从互联网产生大数据的角度
案例1:某市智慧交通平台每天获取交通卡刷卡记录1900万条,手机定位数据1800万条等。
案例2:大数据的类型多种多样,如抖音用户产生的数据有视频、图像、文字、音乐、位置信息等。
案例3:某基于大数据的网约车平台上,我们只需输入目的地,系统就会立刻分配订单,即时通知附近司机;此外,我们还可以看到司机的大概位置及预计到达时间。
案例4:城市的智慧交通大数据,需要数以万计的摄像头连续不间断的监控,大量的视频数据被保存下来,但交通事故的视频画面,有用的部分可能仅仅只有一两秒。
16
大数据的特征——从互联网产生大数据的角度
案例1:某市智慧交通平台每天获取交通卡刷卡记录1900万条,手机定位数据1800万条等。
数据体量巨大
从TB级别跃升到PB级别
数据存储单位:B、KB、MB、GB、TB、PB、EB、ZB
进率:1KB=1024B 1MB=1024KB
17
大数据的特征——从互联网产生大数据的角度
案例2:大数据的类型多种多样,如抖音用户产生的数据有视频、图像、文字、音乐、位置信息等。
数据类型繁多
如:网络日志、视频、图片、地理位置信息等。
18
大数据的特征——从互联网产生大数据的角度
案例3:某基于大数据的网约车平台上,我们只需输入目的地,系统就会立刻分配订单,即时通知附近司机;此外,我们还可以看到司机的大概位置及预计到达时间。
变化速度快
数据产生的速度快;处理速度快
19
大数据的特征——从互联网产生大数据的角度
案例4:城市的智慧交通大数据,需要数以万计的摄像头连续不间断的监控,大量的视频数据被保存下来,但交通事故的视频画面,有用的部分可能仅仅只有一两秒。
价值密度低
数据具有价值,但在海量数据中,有价值的可能只有一小部分
20
大数据的特征——从互联网产生大数据的角度
低价值
密度
Value
大量
Volume
大数据的
4V特征
多样
Variety
高速
Velocity
21
大数据的特征——从互联网思维的角度
样本趋于总体
1
精确让位于模糊
2
相关性重于因果
3
22
样本趋于总体
统计时代