中职信息技术基础模块下册第四章初识大数据　课件

重庆旅游攻略 计算机技术的革新提升了人类存储与处理数据的能力，我们由此也进入了“大数据时代” ...... 初识大数据 信息技术基础模块第四章数据处理 学习目标 大数据定义 01 02 大数据的特征 03 大数据的处理流程 9 一、大数据定义 “大数据”研究机构 Gartner将 “大数据”定义为:“大数据，是无法在一定时间范围内用常规软件工具进行捕捉，需要新处理模式才能具有更强的決策力、洞察发现力和流程优化力来适应的海量、高增长和多样化的信息资产。 麦肯锡将“大数据”定义为：一种规模大到在获取、存储、管理、分析方面大大超出了传统数据库软件工具能力范围的数据集合，具有海量的数据规模、快速的数据流转、多样的数据类型和价值密度低四大特征。 维基百科将“大数据” 定义为：大数据是指一些使用传统数据库管理工具或数据处理应用很难处理的大型而复杂的数据集。 总结：大数据是指无法在合理时间内用常规软件工具进行获取、存储、管理和处理的数据集合。 1.学生学籍系统中存放着大量的学生数据。 2. 网络购物平台一天所生成的数据量。 3. 全民K歌提示你打败了全国90%的人。 4. 我校高一年级的期中成绩表。 5. 为了避免堵车，利用高德地图，查看道路拥堵情况。 下列哪些是大数据？ 11 2024年3月，中国互联网络信息中心发布的第53次《中国互联网络发展状况统计报告》显示，截至2023年12月，我国网民规模达10.92亿人，较2022年12月新增2480万人，互联网普及率达77.5%。 二、[探究活动] 大数据有哪些特征？ 情景一 据IDC(互联网数据中心)预测，全球数据圈将从2018年的33ZB增长到2025年的175ZB。1ZB相当于1万亿GB，如果以平均25Mb/秒的速度下载2025年的整个全球数据圈，那么一个人完成此任务需要18亿年，如果全世界所有人一起不间断下载，也需要81天才能完成。 二、[探究活动] 大数据有哪些特征？ 1. 数据体量大 1Byte 1KB 1MB 1GB 1TB 1PB 1EB 1ZB 1YB 1NB... 字节 千字节 兆字节 吉字节 太字节 拍字节 艾字节 泽字节 尧字节..... 1MB=( )KB 数据存储的基本单位是( ) 二、[探究活动] 大数据有哪些特征？ 情景二 地理位置信息方便出行 图片攻略 住宿价格表格统计 二、[探究活动] 大数据有哪些特征？ 结构化数据是具体的数据，包括数字、日期、文本等。这些数据可以轻易地映射到表格、关系型数据库或其他结构化数据存储系统中。 表格软件统计分析 2. 数据类型多样化 二、[探究活动] 大数据有哪些特征？ 非结构化数据则包括图片、音频、视频、电子邮件、社交媒体帖子等不规则、无固定格式和规则的数据，很难用表格或关系型数据库来存储和处理。 2. 数据类型多样化 二、[探究活动] 大数据有哪些特征？ 01 存储在数据库里，有一定结构的数据，如表格、表单等。 结构化数据 02 具有一定结构但灵活性更高的数据，如网页数据等。 半结构化数据 03 没有固定结构的数据，如文本、图片、音频、视频等。 非结构化数据 2. 数据类型多样化 二、[探究活动] 大数据有哪些特征？ 情景三 实时直播 实时弹幕 实时购物 二、[探究活动] 大数据有哪些特征？ 3. 速度快 在大数据环境下，数据可以实时生成，满足即时性需求。 数据实时生成 数据在大数据系统中可以快速传输，满足数据共享和交换的需求。 数据快速传输 大数据技术可以高速处理海量数据，保证数据处理的效率。 数据高速处理 “ 发送一条抖音需要几秒钟？” “ 评论一条抖音需要几秒钟？” 1秒定律 秒发 秒回 二、[探究活动] 大数据有哪些特征？ 情景四 2024“五一”出行数据统计 4. 真实性 体量大 速度快 种类多 真实性 二、[探究活动] 大数据有哪些特征？ 情景五 在大数据中，能否很容易就找到我们所需要的数据呢？ 大数据虽然有海量的信息，但是用真正可的数据可能只有一小部分，从海量的数据中筛选一小部分也需要巨大的工作量。 以视频为例，在连续不间断的监控过程中，有用的数据可能仅仅一两秒。 5. 价值密度低 价值密度低——大数据时代亟需解决的问题之一 低价值密度的数据可能导致分析结果出现偏差或误导，影响决策的准确性。 处理大量低价值密度的数据需要更多的计算资源和时间，增加了数据处理的成本。 由于大数据中混杂着大量低价值密度的信息，导致数据质量参差不齐，给数据分析带来挑战。 数据质量难以保证 数据处理成本高昂 分析结果可能不准确 22 三、大数据的处理流程 数据采集 数据清洗 数据存储 数据挖掘 数据展现 三、大数据的处理流程 观看视频，找一找你在其中发现了大数据处理流程中的哪个部分？ 三、大数据的处理流程 数据采集 数据清洗 数据存储 数据挖掘 数据展现 叶片上、土壤里安装传感器，采集数据。 经过一系列的模型与算法分析，得到相对精准的预警信息，进行喷药，或采取防治措施。 数据可视化呈现 去除重复、错误、不完整的数据，保证数据质量。 分布式存储 智慧农业数据可视化展示 学习目标 大数据定义 01 02 大数据的特征 03 大数据的处理流程 27 总结区分 传统数据与大数据的特征 大数据 传统数据 1.数据体量 2.数据类型 3.数据速度 4.数据的真实度 5.数据的价值密度 大 多、复杂 快 高 低 小 少、单一 慢 不够全面 高 28 $$