内容正文:
3.2 数据采集与整理
人教中图版(2019) 数据与计算
3.3 数据采集与整理
学习目标:
通过应用实例,掌握数据采集和整理的基本方法,能够根据任务需求,选择适当的采集工具和方法。
了解网络爬虫的功能和工作原理。
了解数据安全面临的威胁和进行数据保护的意义及方法,增强数据安全意识,学会数据备份和用数字化工具对文件和数据进行保护。
人教中图版(2019) 数据与计算
3.3 数据采集与整理
南水北调中线工程.mp4
思考:我国确定南水北调这一伟大工程的依据是什么?
人教中图版(2019) 数据与计算
3.3 数据采集与整理
实践1:明确数据需求
利用互联网查找我国水资源分布的图文资料,回答下列问题:
我国水资源最缺乏的地区是哪里?水资源压力最大的哪里 ?为什么呢?
人教中图版(2019) 数据与计算
3.3 数据采集与整理
实践2:确定数据来源
黄河流域水资源数据汇总表
项目 2014 年 2015 年 2016 年
水资源总量/108m3 653.7 541.0 601.8
供水总量/108m3 387.5 395.5 390.4
用水总量/108m3 387.5 395.5 390.4
数据来源 水利部网站 水利部网站 水利部网站
各小组参照上表,查询其他流域的水资源情况,并填写下页表格:
人教中图版(2019) 数据与计算
3.3 数据采集与整理
( )流域水资源数据汇总表
项目 2014 年 2015 年 2016 年
水资源总量/108m3
供水总量/108m3
用水总量/108m3
数据来源
填写表格提交至教师机,展示结果:
人教中图版(2019) 数据与计算
3.3 数据采集与整理
体验探究:
如何既准确又快速地得到这些数据?
网络爬虫
自主学习: http://www.jleduyun.cn/index.php?r=center/person/blog/view&id=5281799
人教中图版(2019) 数据与计算
3.3 数据采集与整理
传感器
红外传感器.mp4
人教中图版(2019) 数据与计算
3.3 数据采集与整理
调查问卷
人教中图版(2019) 数据与计算
3.3 数据采集与整理
体验交流: 手机中采用了哪些传感器来采集数据?
手机中的传感器1 .mp4
人教中图版(2019) 数据与计算
3.3 数据采集与整理
手机中的传感器2 .mp4
人教中图版(2019) 数据与计算
3.3 数据采集与整理
实践3:数据采集
获取2007-2016年全国各地区用水量数据,保存为CSV文件。
人教中图版(2019) 数据与计算
3.3 数据采集与整理
实践4:数据整理
编写程序检测用水量为负值的数据
问题:采集到的全国各地区2007 -2016 年用水量数据,存储为"yongshui.csv" 文件,如图所示。采集的数据由于误输入,传输错误等可能存在问题。例如,河北省2013年用水量中的-191.29和-219.99两个值,不属于正常用水量,需要检测出所有类似的异常数据,并提示用户对数据进行检查和修改。
人教中图版(2019) 数据与计算
3.3 数据采集与整理
(1)分析问题
已知条件: “yonghui.csv” 文件中保存了各地区2007- 2016 年用水总量,如果其中的数据为负值,则认为数据异常;
求解目标:检测出异常数据,提醒用户核对;
已知与未知的关系:可通过检测每个用水量数据是否为负值,发现异常的数据。
(2)规划问题求解流程
首先读人