~数据分析知识分享~

近来有一些小伙伴咨询数据分析相关的一些知识内容 我收集了一些相关信息 在这里简单做一些分享和介绍,后续有相关的内容我也会持续的更新!感谢大家的支持与陪伴!

拆解问题一个原则四类方法

数据分析工程技术

数据分析四种类型 六个方向 + 分析师层级

万能问题确认公式

数据分析认知知识点

  • 数据自身三大属性

    • 客观
    • 量化
    • 机器可处理
  • 数据建设的七个层级

    • 凭感觉
    • 看数字
    • 用表格
    • 搭系统
    • 建数仓
    • 中心化
    • 智能化
  • 数据分析实际价值

    • 个人价值
      • 效率提升
    • 公司价值

      • 映射现状,及时反馈
      • 统一认知,加强协作
      • 算法基础,自动生产
    • 时代价值
      • 数据是一切科学研究的基础
  • 数据分析的实现原理

    • 数据分析解决问题的原理

      • 业务中的数据分析是为了更好的解决现实问题
      • 传统:问题发生------结合现实------逻辑推理------得出结论
      • 数据:问题发生------结合现实------数据映射------量化分析------得出结论
    • 数据分析实现的具体流程

      • 定义问题

        • 明确范围
        • 拆解问题
      • 准备数据

        • 获取数据
        • 清洗数据
        • 处理数据
        • 验证数据
      • 分析数据

        • 分析的目的

          • 业务分析:关注数据与业务的关联性、映射关系和可解释性

            • 常规计算
            • 数据可视化
            • 归纳/演绎
          • 建模分析:关注数据的整体特征(特征决定上限,模型调参无限趋近于上限)

            • 机器学习建模
            • 深度学习挖掘
        • 分析的种类

          • 计算型分析

            • 统计学
            • 机器学习
          • 逻辑型分析

            • 归纳/演绎
            • 思维模型
      • 得出结论

        • 假设性结论
        • 初步传递结论
        • 得到新的反馈
        • 验证/推翻结论
      • 应用数据

        • 策略+实施:业务解决问题
        • 监控+预警:自动发现问题
        • 算法+部署:自动解决问题
    • 数据分析实现所需的技术

      • 埋点采集

        • (1)传感器
        • (2)系统日志采集方法
        • (3)Web爬虫
      • 传输存储

        • 传输
          • 借助网络
        • 存储

          • 借助数据库技术
          • 研究如何组织和存储数据。如何高效的获取和处理数据
          • 存储是一门大学问

            • 速度
            • 准确性
            • 最大规模
            • 数据种类
      • 提取回流

        • 提取

          • 查询
          • 导出
        • 回流
          • 数据被操作过后,怎么回到数据库,继续参与生产和建模
      • 清洗处理

        • 清晰
          • 符合数据标准
        • 处理
          • 符合实际需求
      • 连接导入

        • 怎么对接到不同的工具和软件,涉及到各种中间键和协议
      • 分析建模

        • 分析

          • 计算
          • 图表
        • 建模

          • 机器学习
          • 深度学习
      • 部署应用

        • BI监控
        • 算法平台
          • 先知
        • 工程开发
    • 数据分析的职业发展
      • 三个层级(四种类型六个方向分析师层级图)

        • 接需求 = 工具人
          • 即插即用,把工具练到极致
        • 背指标 = 对业务负责的分析师

          • 不对业务结果负责的分析本质上没有任何意义
          • 想要做好分析师就要深入业务场景,对业务负责
        • 做研究 = 数据科学家

          • 研究准确率更高的算法框架
          • 提供效率更好性能更好的数据技术
相关推荐
赴3355 小时前
矿物分类案列 (一)六种方法对数据的填充
人工智能·python·机器学习·分类·数据挖掘·sklearn·矿物分类
专注API从业者8 小时前
基于 Flink 的淘宝实时数据管道设计:商品详情流式处理与异构存储
大数据·前端·数据库·数据挖掘·flink
淡酒交魂10 小时前
「Flink」业务搭建方法总结
大数据·数据挖掘·数据分析
TDengine (老段)10 小时前
TDengine IDMP 高级功能(4. 元素引用)
大数据·数据库·人工智能·物联网·数据分析·时序数据库·tdengine
计算机毕设定制辅导-无忧学长1 天前
Grafana 与 InfluxDB 可视化深度集成(二)
信息可视化·数据分析·grafana
Jina AI1 天前
回归C++: 在GGUF上构建高效的向量模型
人工智能·算法·机器学习·数据挖掘·回归
瓦特what?1 天前
关于C++的#include的超超超详细讲解
java·开发语言·数据结构·c++·算法·信息可视化·数据挖掘
鹏多多.2 天前
flutter-使用device_info_plus获取手机设备信息完整指南
android·前端·flutter·ios·数据分析·前端框架
芦骁骏2 天前
自动处理考勤表——如何使用Power Query,步步为营,一点点探索自定义函数
数据分析·excel·powerbi
柑木2 天前
隐私计算-SecretFlow/SCQL-SCQL的两种部署模式
后端·安全·数据分析