数据清洗与融合期末考试(常见理论题)

题库来源未知,大家有的话,也可以发给我,继续补充,答案不一定全部得分,但有借鉴价值

题库会不断扩充,答案会不断完善。

  1. 近几年的新冠疫情中,大数据发挥了重要的作用,通过大数据进行数据分析后,采取相应措施精准控制疫情传播。请根据自己的理解论述大数据、数据分析和数据挖掘之间的联系。

    注意答,大数据,数据分析,数据挖掘的概念

    大数据是数据挖掘和数据分析的基础,数据分析和数据挖掘的区别和联系

  2. 除 Python 外,你所知道的数据分析和处理的工具有哪些?为何目前非常流行使用 Python进行数据分析?

    工具:Excel、SPSS、SAS、R

    因为python标准库较多,简单易学,开源免费而且python还可以爬取数据

  3. 什么是数据可视化?目前比较流行的数据可视化方法有哪些?请举例说明数据可视化的应用实例。

    把数据以图形化的方式展示出来,就称之为数据的可视化。

    目前流行的数据可视化方法有:时空数据可视化,层次与网络结构可视化,文本和跨媒体数据可视化,多变量数据可视化。时空数据。疫情期间的实时地图,双十一期间的商品交易屏幕

  4. 大数据时代信息资源丰富,人们可以轻松从现实世界采集到大量的数据,为什么不能直接使用获取的数据,还要对其进行预处理呢?

    大数据时代虽然信息资源丰富,但是根据大数据的4V原则中的(数据量大,种类繁多,价值密度低,速度快)数据量大,种类繁多和价值密度低,我们可知我们所获取的数据中有大量的脏数据和异常值,包括我们所用不到的数据。不进行处理的话会影响我们的结果和效率。因此我们需要

  5. 数据分析是一个探索性的过程,而可视化分析又是呈现有效分析结果的一种好方法。那么,数据可视化的方法有哪些,举例说明?

    时空数据可视化(疫情时期的实时监控地图),层次与网络结构可视化(),文本和跨媒体数据可视化(词云分析),多变量数据可视化()。//暂时存疑

  6. 数据清洗是什么?结合所学知识谈谈数据清洗主要应用有哪些?

    数据清洗对数据进行重新审查和校验的过程,目的在于删除重复信息、纠正存在的错误,并提供数据一致性。主要应用于数据挖掘和数据分析

  7. 请解释数据清洗的定义,并列举几种常见的数据质量问题。

    数据清洗对数据进行重新审查和校验的过程,目的在于删除重复信息、纠正存在的错误,并提供数据一致性。异常值,重复值,缺失值,数据格式错误,数据单位错误。

  8. 数据清洗的过程包括哪些步骤?并描述每个步骤的作用。//过程不太明确

    数据收集,获取我们所需的数据集

    数据

  9. 数据重复和缺失值是数据清洗中常见的问题,请说明如何识别和处理这些问题。

    对于缺失值,我们可以先用isnull函数对缺失值进行查看,然后通过dropna对缺失值进行删除也可以用fillna对缺失值进行填充

    对于重复值,我们可以先用duplicated对重复值进行判别,然后通过drop_duplicate对重复进行删除操作,其次我们可以通过drop_duplicate函数中keep参数来调整我们默认保留的时第一个出现的数据还是最后一个出现的数据。

  10. 为什么数据清洗和融合在数据分析过程中如此重要?请举例说明。

    在我们日常的分析中,我们所有的数据难免会有一些脏数据和异常值,数据清洗和融合可以为我们提高数据质量,增加我们的数据分析的效率,使我们数据分析的结果更为准确

  11. 数据异常值检测在数据清洗中扮演什么角色?根据所学知识,请举例说明几种常见的异常值检测技术。//不会

  12. 请举例说明在数据处理阶段fillna()和replace()的区别及用法。

    fillna和replace的区别,fillna主要处理的是缺失值,replace主要是替换指定字符串。

    fillna用法:fillna有四个参数,分别为(value,method),axis,inplace和limit其中value表示用于填充空值的值,method可以定义填充空值方式,value和method两者存一,axis用来设定填充是按行填充,还是按照列来填充,inplace用来设置是否更原DataFrame的值,limit用来限制填充值的个数

    replace用法:replace有三个参数分别为 旧字符串,新字符串和替换个数 其语法方式为replace(旧字符串,新字符串,替换个数)

相关推荐
GIS好难学6 小时前
2025年华中农业大学暑期实训优秀作品(5):智慧煤仓监控系统平台——重塑煤炭仓储管理新模式
前端·vue.js·信息可视化·gis开发·webgis
xinyu_Jina10 小时前
订阅指挥中心:数据可视化中的KPI设计与交互式财务审计
信息可视化
木心爱编程11 小时前
Qt C++ 串口通信+数据可视化:工业设备数据实时采集与界面显示
c++·qt·信息可视化
檐下翻书1731 天前
互联网企业组织结构图在线设计 扁平化架构模板
论文阅读·人工智能·信息可视化·架构·流程图·论文笔记
派可数据BI可视化1 天前
你知道 BI 是什么吗?关于 BI 系统的概述
大数据·信息可视化·数据分析
打码人的日常分享1 天前
IPD项目质量体系管理方案
大数据·运维·人工智能·信息可视化·1024程序员节
打码人的日常分享1 天前
云计算大数据系统建设方案,私有云建设方案
运维·网络·安全·信息可视化·架构·云计算
数据皮皮侠1 天前
上市公司战略性新兴产业专利数据库(2003-2024)
数据库·人工智能·信息可视化·区块链·微信开放平台
云天徽上1 天前
【数据可视化-162】数据见证大爱!企业捐款驰援香港数据可视化分析(Pyecharts实现)
开发语言·python·信息可视化·数据可视化·pyecharts
沃达德软件1 天前
智慧警务与数据分析
大数据·人工智能·信息可视化·数据挖掘·数据分析