~数据分析知识分享~

近来有一些小伙伴咨询数据分析相关的一些知识内容 我收集了一些相关信息 在这里简单做一些分享和介绍,后续有相关的内容我也会持续的更新!感谢大家的支持与陪伴!

拆解问题一个原则四类方法

数据分析工程技术

数据分析四种类型 六个方向 + 分析师层级

万能问题确认公式

数据分析认知知识点

  • 数据自身三大属性

    • 客观
    • 量化
    • 机器可处理
  • 数据建设的七个层级

    • 凭感觉
    • 看数字
    • 用表格
    • 搭系统
    • 建数仓
    • 中心化
    • 智能化
  • 数据分析实际价值

    • 个人价值
      • 效率提升
    • 公司价值

      • 映射现状,及时反馈
      • 统一认知,加强协作
      • 算法基础,自动生产
    • 时代价值
      • 数据是一切科学研究的基础
  • 数据分析的实现原理

    • 数据分析解决问题的原理

      • 业务中的数据分析是为了更好的解决现实问题
      • 传统:问题发生------结合现实------逻辑推理------得出结论
      • 数据:问题发生------结合现实------数据映射------量化分析------得出结论
    • 数据分析实现的具体流程

      • 定义问题

        • 明确范围
        • 拆解问题
      • 准备数据

        • 获取数据
        • 清洗数据
        • 处理数据
        • 验证数据
      • 分析数据

        • 分析的目的

          • 业务分析:关注数据与业务的关联性、映射关系和可解释性

            • 常规计算
            • 数据可视化
            • 归纳/演绎
          • 建模分析:关注数据的整体特征(特征决定上限,模型调参无限趋近于上限)

            • 机器学习建模
            • 深度学习挖掘
        • 分析的种类

          • 计算型分析

            • 统计学
            • 机器学习
          • 逻辑型分析

            • 归纳/演绎
            • 思维模型
      • 得出结论

        • 假设性结论
        • 初步传递结论
        • 得到新的反馈
        • 验证/推翻结论
      • 应用数据

        • 策略+实施:业务解决问题
        • 监控+预警:自动发现问题
        • 算法+部署:自动解决问题
    • 数据分析实现所需的技术

      • 埋点采集

        • (1)传感器
        • (2)系统日志采集方法
        • (3)Web爬虫
      • 传输存储

        • 传输
          • 借助网络
        • 存储

          • 借助数据库技术
          • 研究如何组织和存储数据。如何高效的获取和处理数据
          • 存储是一门大学问

            • 速度
            • 准确性
            • 最大规模
            • 数据种类
      • 提取回流

        • 提取

          • 查询
          • 导出
        • 回流
          • 数据被操作过后,怎么回到数据库,继续参与生产和建模
      • 清洗处理

        • 清晰
          • 符合数据标准
        • 处理
          • 符合实际需求
      • 连接导入

        • 怎么对接到不同的工具和软件,涉及到各种中间键和协议
      • 分析建模

        • 分析

          • 计算
          • 图表
        • 建模

          • 机器学习
          • 深度学习
      • 部署应用

        • BI监控
        • 算法平台
          • 先知
        • 工程开发
    • 数据分析的职业发展
      • 三个层级(四种类型六个方向分析师层级图)

        • 接需求 = 工具人
          • 即插即用,把工具练到极致
        • 背指标 = 对业务负责的分析师

          • 不对业务结果负责的分析本质上没有任何意义
          • 想要做好分析师就要深入业务场景,对业务负责
        • 做研究 = 数据科学家

          • 研究准确率更高的算法框架
          • 提供效率更好性能更好的数据技术
相关推荐
惟长堤一痕1 小时前
医学数据分析实训 项目五 聚类分析--蛋白质消费结构分析--车辆驾驶行为指标
数据挖掘·数据分析
William数据分析2 小时前
[Python可视化]数据可视化在医疗领域应用:提高诊断准确性和治疗效果
python·信息可视化·数据分析
Hello.Reader4 小时前
深入理解 ClickHouse 的性能调优与最佳实践
大数据·数据仓库·clickhouse·数据分析
Francek Chen5 小时前
【机器学习-监督学习】朴素贝叶斯
人工智能·机器学习·分类·数据挖掘·scikit-learn·朴素贝叶斯·naive bayes
diaobusi-8810 小时前
Python数据分析 Pandas基本操作
python·数据分析·pandas
rubyw10 小时前
数据分析中:相关系数计算方法怎么选择合适?
python·数据挖掘·数据分析
xuehaikj11 小时前
车辆检测与分类系统源码分享
人工智能·分类·数据挖掘
DA树聚13 小时前
多模态大语言模型综述(中)-算法实用指南
人工智能·深度学习·算法·语言模型·自然语言处理·数据挖掘
statistican_ABin16 小时前
Python数据分析-Steam 收入排名前 1500 的游戏
python·游戏·数据分析
xuehaishijue16 小时前
食品分类2检测系统源码分享
人工智能·分类·数据挖掘