1.5 数据与大数据 课件-2022-2023学年浙教版（2019）高中信息技术必修1

1.5数据 与大数据 1 目录 CONTENTS 1 大数据的概念 2 大数据的特征 3 大数据思维 4 大数据对社会的影响 2 01 PART ONE 大数据的概念 3 01 大数据的概念 这是一张全省高等院线以及在校生人数分布情况的图片，通过这张图片，领导可以清楚掌握全省学校分布情况，学生情况，教师情况等。 通过区域、国家办学指标对比来科学决策。并可点击下到各个区域，分析对比各个区域的学生入学情况、师资配备情况等，精准定位困难区域、困难学校，合理的资源分配，解决教育区域发展不均衡的难题。 01 大数据的概念 这张图片中是某省近四年内的考试成绩数据，据全省54所学校近四年的状态数据，将对四年的状态数据进行横向，纵向对比分析，提供全省的整体概况，支撑省各高校应用，使各个高校了解自身所处的位置，进行差异化办学。 01 大数据的概念 上述两张图片中，需要的数据量多不多？大不大？ 多！ 大！ 两张图片中其实都运用到了大数据，那大数据的定义又是什么呢？ 01 大数据的概念 早在几十年前，在“信息爆炸”“知识爆炸”的表述中，就已经对数据的大规模增长有所认识。20世纪90年代末，随着数据处理技术的发展，“大数据”的概念首次由美国硅图公司(SGI)的一位科学家正式提出。2016年，数据科学家将大数据正式定义为: 大数据代表着信息量大、速度快、种类繁多的信息资产，需要特定的技术和分析方法将其转化为价值。也就是说，大数据之“大”，不仅指规模、速度和种类的特征，还意味着它超出以往常用的数据采集、组织、管理和加工等软件的处理能力，要求新型集成技术从多元。复杂和巨量规模的数据集里洞察规律。 02 PART TWO 大数据的特征 8 02 大数据的特征 请分析下面这些案列，并说一说他们体现了大数据的什么特征呢？ 9 02 大数据的特征 梅西百货的实时定价机制。根据需求和库存的情况，该公司基于SAS的系统对多达7300万种货品进行实时调价 Tesco PLC（特易购）和运营效率。这家超市连锁在其数据仓库中收集了700万部冰箱的数据。通过对这些数据的分析，进行更全面的监控并进行主动的维修以降低整体能耗。 数据体量巨大 百度每天采集的用户行为数据有1.5PB以上 大数据收集和分析的数据量非常大，现在传感器、互联网、智能终端的每天都在源源不断的产生，海量数据，人类社会的数据量在不断刷新，一个个新的量级单位已经从TB、PB级别跃升至EB、ZB级别。 10 02 大数据的特征 微信、QQ、微博、抖音等每天都有大量数据产生，数据产生的速度非常快。 通过气象卫星等设备采集到的数据，必须及时处理才能满足天气预报的需求。数据处理的速度非常快。 速度快 两种含义：数据产生的速度非常快、数据处理的速度非常快。 11 02 大数据的特征 大数据的数据来源多，既有人工产生的，如人们日常使用智能手机，短信、微信、视频、语音、电子邮件等会产生各种数据； 也有机器自动产生的，如各种传感器在生产监测、环境监测、交通监测、安防监测等过程中也会产生大量数据。 数据类型多 数据种类和格式不可能保持一致，各种结构化、半结构化和非结构化数据共存是大数据的普遍现象 12 02 大数据的特征 某学校在一日早上发现学校外部网线被人为剪断，因不清楚剪断的日期，所以用视频监控查找的非常困难，找了一个星期，最终发现某日晚上李某因不满学校的放假通知，悄悄剪断网线报复学校。 价值密度低 大数据蕴含着巨大的价值，但因其数据量庞大，可能发挥价值的仅是其中非常小的部分，价值密度相对较低。 13 03 PART TWO 大数据思维 14 03 大数据思维 大数据是一场变革，改变的不仅是数据，还有人们的思维。 （1）大数据要分析的是全体数据，而不是抽样数据。 在大数据时代，人们不仅可以获得研究所需的直接数据，而且还能对与之有关联的所有数据进行分析。分析数据已经不再依赖干采样，从而带来更全面的认识，也能更清楚地发现抽样数据无法揭示的详尽信息。 15 03 大数据思维 大数据是一场变革，改变的不仅是数据，还有人们的思维。 （1）大数据要分析的是全体数据，而不是抽样数据。 在大数据处理过程中，数据的来源多种多样，这些数据可以是结构化的、半结构化的，也可以是非结构化的。当数据量大到一定程度时，个别数据的不准确就显得不那么重要。 （2）对于数据不再追求精确性，而是能够接受数据的混杂性。 16 03 大数据思维 大数据是一场变革，改变的不仅是数据，还有人们的思维。 （1）大数据要分析的是全体数据，而不是抽样数据。 在大数据时代，比如电商的个性化推荐，不必知道人们购买某些商品的原因，只要找到商品之间的关联性，就能为客户提供精确的推荐。 （2）对于数据不再追求精确性，而是能够接受数据的混杂性。 （3）不一定强调对事物因果关系的探求