5.2.1 数据采集的方法和工具课件-2026-2027学年粤教版高中信息技术必修一
2026-08-04
|
27页
|
548人阅读
|
103人下载
普通
摘要:
该高中信息技术课件聚焦数据采集的方法和工具,通过“地方线上博物馆数据采集”项目情境导入,从优化线上博物馆体验的问题出发,引导学生制定需求清单,逐步学习系统日志、网络爬虫等采集方法,构建从情境到实践的学习支架。
其亮点是以项目式学习为主线,结合真实情境设计实践活动,如设计爬取“数字敦煌”数据的算法与Python程序,融入计算思维与数字化学习,强调遵守网络规则培养信息社会责任。学生能提升实践与问题解决能力,教师可依托结构化活动高效开展教学。
内容正文:
5.2.1 数据采集的方法和工具
1、了解数据采集的方法和工具
2、选用合适的方法和工具采集数据
5.2.1 数据采集的方法和工具
学习目标
“了解一座城市最好的方式就是去博物馆。”
项目情境
广东省博物馆
上海市博物馆
项目:地方线上博物馆数据采集
情境:线上博物馆的日益普及,设计“地方线上博物馆”后遇到如何持续优化的问题。
目的:持续优化地方线上博物馆体验
思考:有哪些做法可以助力线上博物馆持续优化体验呢?
项目:地方线上博物馆数据采集
思考:有哪些做法可以助力线上博物馆持续优化体验呢?
数据采集
记录线上博物馆的访问人数及交互记录收集用户对线上博物馆的意见
定期对系统进行维护并记录维护数据学习其他线上博物馆的网页内容
……
项目活动一:制定需求清单
需采集数据 数据来源 数据类别 采集目的
用户的反馈意见 已访问用户 主观数据 了解用户的想法与需求
小组讨论,将需要采集的数据、数据类型和采集目的填写到需求清单中
项目活动一:制定需求清单
需采集数据 数据来源 数据类别 采集目的
用户的反馈意见 已访问用户 主观数据 了解用户的想法与需求
访问线上博物馆留下的数据 线上博物馆平台 客观数据 了解线上博物馆中受欢迎的内容
对系统的维护数据 线上博物馆平台 客观数据 跟踪系统状态,保障平台稳定可用
其他线上博物馆的网页内容 其他线上博物馆官方平台 客观数据 借鉴优秀案例的设计思路,获取灵感
…… …… …… ……
在信息系统中,系统日志是记录系统中硬件、软件和系统问题的信息文件。通过记录系统日志中的数据,可以监视系统中发生的事件,可以检查错误发生的原因,或者寻找受到攻击时攻击者留下的痕迹。
系统日志采集法
系统日志包括操作系统日志、应用程序日志和安全日志。
系统日志采集法
搜索引擎
网络数据采集法
信息技术
生成式人工智能
网络数据采集法
生成式人工智能
网络数据采集法
体验:使用生成式人工智能收集我国线上博物馆平台链接
网络数据采集法
网络数据采集法
网络爬虫
从一个或若干个初始网页的URL(Uniform Resource Locator,统一资源定位符)开始,获得初始网页上的URL,在抓取网页的过程中,不断从当前网页上抽取新的URL放入队列,直到满足系统的一定停止条件。
网络数据采集法
网络爬虫
非结构化数据
图片
文字
结构化存储形式
二进制 数据库
CSV
网络数据采集法
确定目标
发送请求
等待响应
获取内容
解析内容
提取数据
保存数据
网络爬虫
项目活动二:爬取网页数据
1 设计算法
开始
保存数据
结束
确定“数字敦煌”URL
发送http请求
请求成功?
解析网页数据内容
提取数据
数据完整?
更改参数
错误处理
项目活动二:爬取网页数据
发送http请求
更改参数
错误处理
请求成功? Y
解析网页数据内容
提取数据
N
数据完整? Y
保存数据
结束
N
2 体验程序
确定“数字敦煌”URL
开始
项目活动二:爬取网页数据
HTTP库,用于发送各种HTTP请求
用于解析网页HTML和XML文档,能够从网页中提取数据。
2 体验程序
项目活动二:爬取网页数据
2 体验程序
项目活动二:爬取网页数据
2 体验程序
遵守规则
不侵犯他人权益不危害网络安全
其他数据采集法
传感器采集法
其他数据采集法
问卷调查法
其他数据采集法
特定方法
对于企业生产经营或科学研究等保密性要求较高的数据,可通过与企业或研究机构合作,使用特定系统接口等相关方式收集数据。
项目活动三:完成采集说明
数据 数据来源 采集方法 说明
用户的反馈意见 已访问用户 问卷调查法 设计线上博物馆调查问卷,在
用户访问之后填写
项目活动三:完成采集说明
数据 数据来源 采集方法 说明
用户的反馈意
见 已访问用户 问卷调查法 设计线上博物馆调查问卷,在用
户访问之后填写
访问线上博物
馆留下的数据 线上博物馆平台 系统日志采集法 增加采集平台系统日志的程序设
计,记录用户与平台的交互数据
对系统的维护
数据 线上博物馆平台 系统日志采集法 增加采集平台系统日志的程序设计,记
录系统维护数据,定期查看操作系统中记录的系统日志
其他线上博物
馆的网页内容 其他线上博物馆
官方平台 网络数据采集法 设计网络爬虫程序,爬取其他线
上博物馆官方平台数据
…… …… …… ……
课堂总结
数据采集的方法和工具
系统日志采集法
网络数据采集法
其他数据采集法
$
相关资源
示范课
由于学科网是一个信息分享及获取的平台,不确保部分用户上传资料的 来源及知识产权归属。如您发现相关资料侵犯您的合法权益,请联系学科网,我们核实后将及时进行处理。