- 本书赞誉
- 前言
- 目标读者
- 不适合阅读本书的读者
- 本书结构
- 什么是数据处理
- 遇到困难怎么办
- 排版约定
- 使用代码示例
- 致谢
- 第 1 章 Python 简介
- 第 2 章 Python 基础
- 第 3 章 供机器读取的数据
- 第 4 章 处理 Excel 文件
- 第 5 章 处理 PDF 文件 以及用 Python 解决问题
- 第 6 章 数据获取与存储
- 第 7 章 数据清洗:研究、匹配与格式化
- 第 8 章 数据清洗:标准化和脚本化
- 第 9 章 数据探索和分析
- 第 10 章 展示数据
- 第 11 章 网页抓取:获取并存储网络数据
- 第 12 章 高级网页抓取:屏幕抓取器与爬虫
- 第 13 章 应用编程接口
- 第 14 章 自动化和规模化
- 第 15 章 结论
- 附录 A 编程语言对比
- 附录 B 初学者的 Python 学习资源
- 附录 C 学习命令行
- 附录 D 高级 Python 设置
- 附录 E Python 陷阱
- 附录 F IPython 指南
- 附录 G 使用亚马逊网络服务
- 关于作者
- 关于封面
6.2 真实性核查
为保证报告的可信,对你的数据做真实性核查是非常重要的,尽管有时可能既烦人又累人。根据数据集的不同情况,真实性核查可能包括以下内容。
· 联系数据源,核实最新的方法和版本。
· 找到其他好的数据源作对照。
· 联系专家,探讨好的数据源和真实信息。
· 进一步研究你选定的主题,检查你的数据源和 / 或数据集是否可信。
有些图书馆和大学可以访问只对订阅用户开放的出版物和教育档案,它们是真实性核查的重要资源。如果可以访问类似 LexisNexis(http://lexisnexis.com/)、国会季刊新闻库(http://library.cqpress.com/)、JSTOR(http://jstor.org/)、康奈尔大学的 arXiv 项目(http://arxiv.org/)和谷歌学术搜索(http://scholar.google.com/)这样的工具,你可以看一下其他人对你的主题已经做了哪些研究及研究成果。
谷歌搜索也可以在真实性核查方面提供帮助。如果某人宣称数据来自于公开发布的来源,那么有可能其他人已经对这一说法做过真实性核查,或者已经证实了这一说法。同样,在评价网上发布的内容时,你需要自己仔细斟酌。数据源是否真实?论证能否令人信服,是否有意义?证据是否有效?对这些问题的回答要做综合评价。
政府部门拥有大量的数据集。如果想研究本地城市、州或国家的某一现象,通常你可以通过电话或电子邮件找到某个人,他手头有很有用的数据集。全球人口普查局会定期发布普查数据,如果你纠结于想要回答什么问题,可以从这些数据开始。
对第一个数据集做过验证和真实性核查之后,以后编写脚本验证数据有效性就会容易很多。你甚至可以用在本书中学到的技巧(特别是第 14 章的内容)创建脚本来自动更新数据。
如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。
绑定邮箱获取回复消息
由于您还没有绑定你的真实邮箱,如果其他用户或者作者回复了您的评论,将不能在第一时间通知您!
发布评论