数据分析

小白学大数据1 小时前
前端·爬虫·python·数据分析
Python 爬虫爬取应用商店数据:请求构造与数据解析应用商店(如 Google Play、App Store、豌豆荚)的应用数据是互联网竞品分析、行业市场研究、ASO 优化的核心数据源。应用商店爬虫的核心爬取难点主要集中在两大模块:一是请求构造,多数平台存在接口参数加密、请求签名校验等反爬限制;二是数据解析,接口普遍存在 JSON 层级嵌套深、不同接口字段命名不规范、数据格式杂乱等问题。本文以应用搜索列表、应用详情页为采集主线,完整讲解抓包分析、合规请求构造、结构化数据解析、代理反爬优化全流程落地方案,并提供可直接复用的 Python 源码。
莽撞的大地瓜7 小时前
大数据·数据库·数据分析
政企舆情大数据服务平台:新浪舆情通以技术赋能全流程管理政企舆情大数据服务平台:新浪舆情通以技术赋能全流程管理在数字化浪潮席卷下,政企机构面临的舆论环境日益复杂,舆情管理的时效性、精准性与系统性成为关键挑战。作为蜜度科技旗下核心产品,新浪舆情通凭借“全网信息实时监测、智能分析、极速预警”三大核心能力,结合新浪微博官方数据支持与36个月数据回溯能力,构建起覆盖舆情全生命周期的智能化解决方案,为政企客户提供从数据感知到决策支持的闭环服务。
莽撞的大地瓜7 小时前
大数据·数据仓库·数据分析
舆情分析智能体:蜜度新浪舆情通以多Agent协同驱动全流程智能升级舆情分析智能体:蜜度新浪舆情通以多Agent协同驱动全流程智能升级在数字化浪潮席卷下,舆情管理已成为企业、政府及公共机构的核心需求之一。面对海量信息、复杂场景与实时性挑战,传统舆情工具的单一功能与模板化输出逐渐难以满足高效决策的需求。蜜度旗下新浪舆情通作为舆情分析领域的优秀代表,通过多Agent协同架构重构技术逻辑,推出V助手舆情分析智能体,实现了从舆情监测、分析、追踪到报告生成的全流程自动化与智能化升级,为行业树立了“精准、高效、灵活”的新标杆。
键盘上的猫头鹰8 小时前
数据分析
数据科学与智能分析基础--开发环境配置Anaconda指的是一个非常强大的Python发行版本,其包含了conda、Python等180多个科学包及其依赖项。因为包含了大量的科学包,Anaconda 的下载文件比较大,如果只需要某些包,或者需要节省带宽或存储空间,也可以使用Miniconda这个较小的发行版(仅包含conda和 Python)
2zcode8 小时前
目标跟踪·数据挖掘·数据分析·客流量
基于YOLO11的轨道交通车站客流密度实时监测与拥挤预警系统(数据集+UI界面+训练代码+数据分析)摘要:随着城市轨道交通客流量的不断增加,车站内的拥挤状况已成为影响乘客安全和出行体验的关键因素。为了实现对车站内客流密度的实时监控与拥挤预警,本研究提出了一种基于YOLO11目标检测模型的智能监测系统。该系统通过对车站监控视频进行实时处理,采用YOLO11模型对车站内的乘客进行精确识别与计数,并计算每个区域的客流密度。
Captain_Data9 小时前
python·机器学习·数据分析·scikit-learn·风控建模
Python机器学习实战:用Scikit-learn从0构建信用风险评分模型(含WOE编码+AUC/KS/PSI评估+评分卡转换)在银行、消费金融、互联网信贷等领域,信用风险评分模型(Credit Scoring Model)是核心业务模型之一。它决定了一个用户是否能拿到贷款、能拿多少、利率是多少。
极光代码工作室10 小时前
大数据·hadoop·python·数据分析·数据可视化
基于大数据的交通流量分析系统随着我国城市化进程持续加速,机动车保有量年均增长超10%,交通拥堵已成为制约城市可持续发展的核心瓶颈。据《2023年中国主要城市交通分析报告》显示,北京、上海、广州等一线城市高峰时段平均车速已降至18–22 km/h,通勤时间成本上升37%。传统基于固定线圈与人工抽样的交通监测手段存在覆盖范围窄、实时性差、数据维度单一等固有缺陷,难以支撑精细化治理需求。本文设计并实现了一套面向城市级路网的基于大数据的交通流量分析系统,融合多源异构数据(浮动车GPS轨迹、地磁传感器、卡口视频结构化数据、气象及POI信息),
码界筑梦坊10 小时前
python·信息可视化·数据分析·flask·vue·毕业设计
361-基于Python的空气质量气候数据分析预测系统本项目是一个以 Flask + Vue2 + MySQL 为主的空气质量数据分析与预测系统,包含:当前数据库默认名称已统一为 design_361_air。
YangYang9YangYan10 小时前
学习·数据分析·产品经理
产品经理学习数据分析的价值与路径提升数据驱动决策能力,减少主观臆断 优化产品迭代效率,通过数据验证假设 增强跨部门沟通说服力,用数据支撑需求优先级 识别用户行为模式,精准定位痛点和机会点
babe小鑫11 小时前
数据挖掘·数据分析
2026数学专业人才发展学数据分析的价值数学专业人才具备扎实的逻辑思维和建模能力,这些技能在数据分析领域具有显著优势。数据分析依赖于统计学、线性代数和优化理论,这些都是数学专业的核心课程。数学背景的人才能够更深入地理解算法原理,开发高效的数据处理模型。
2zcode13 小时前
数据挖掘·数据分析
基于YOLO11的人员异常行为检测与识别智能安防监控系统(数据集+UI界面+训练代码+数据分析)摘要:随着人工智能技术的发展,基于计算机视觉的行为检测系统逐渐成为公共安全领域的重要工具。本研究提出了一种基于YOLOv11模型的行为异常检测与智能识别系统。该系统能够实时监控公共场所中的员工行为,通过视频监控和图像识别技术,识别四种主要的异常行为:涉嫌打架、涉嫌斗殴、涉嫌抢劫和涉嫌盗窃。系统采用YOLOv11进行目标检测,结合多种数据处理方法进行异常行为识别,并通过语音告警和邮件告警系统及时通知相关人员,确保安全事件得到快速响应。
Cloud_Shy6181 天前
python·数据分析·excel·pandas
Python 数据分析基础入门:《Excel Python:飞速搞定数据分析与处理》学习笔记系列(第八章 使用读写包操作 Excel 文件 上篇)本章介绍 OpenPyXL、XlsxWriter、pyxlsb、xlrd 和 xlwt:它们都是可以用来读写 Excel 文件的包,在调用pandas 的 read_excel 函数和 to_excel 函数时,这些包就在背后完成相应的工作。我们可以利用这些读写包来创建更加复杂的 Excel 报表,也可以对文件读取过程进行优化。另外,如果你参与的项目中只需要读写 Excel 文件而不需要 pandas 的其他功能,那么安装整个 NumPy/pandas 技术栈完全就是“杀鸡用牛刀”。本章首先会介绍应当如何
小白学大数据1 天前
开发语言·爬虫·python·数据分析
基于大模型的Python智能爬虫:语义识别与数据清洗实践传统定向爬虫依赖人工编写CSS选择器与XPath语法,针对异构站点适配成本高;网页迭代改版后,原有匹配规则极易失效。大语言模型(LLM)具备HTML语义解析能力,可自适应异构页面,无需人工维护选择器,显著降低爬虫开发运维成本。本文构建LLM驱动的智能爬虫架构,实现页面采集—HTML精炼—结构化提取—语义清洗自动化流程,结合亿牛云代理IP规避封禁限制,完成高通用性、高稳定性的数据采集方案。
Cloud_Shy6181 天前
vscode·python·jupyter·数据分析·excel
Python 数据分析基础入门:《Excel Python:飞速搞定数据分析与处理》学习笔记系列(附录 B 高级 VS Code 功能)首先在 VS Code 中打开配套代码库的 debugging.py 文件。然后点击第 4 行左边的空白处,你会看到一个红点,这就是断点,代码会在此处暂停执行。接下来按下 F5 键开始调试:命令面板会显示调试配置选项。选择“Python 文件”以调试活动文件,代码会执行到断点处停止。此时这一行代码会高亮显示,代码的执行过程也会暂停。在调试时,状态栏会变成橙色。
小白学大数据1 天前
人工智能·python·数据分析
均线选股策略研究:基于 Python 数据分析实现在股票量化交易领域,技术分析凭借直观的数据逻辑、简单的落地门槛,成为个人投资者入门首选分析方式。均线指标(MA)作为技术分析的核心指标,能够平滑股票价格波动曲线,过滤短期市场杂波,清晰反映股价中长期运行趋势,凭借稳定性强、逻辑通俗易懂的优势,被广泛应用于选股、择时交易场景。
源码之家1 天前
大数据·python·数据挖掘·数据分析·django·lstm·课程设计
计算机毕业设计:Pyhon健康数据分析系统 Django框架 数据分析 可视化 身体数据分析 大数据(建议收藏)✅博主介绍:✌全网粉丝50W+,前互联网大厂软件研发、集结硕博英豪成立软件开发工作室,专注于计算机相关专业项目实战6年之久,累计开发项目作品上万套。凭借丰富的经验与专业实力,已帮助成千上万的学生顺利毕业,选择我们,就是选择放心、选择安心毕业✌ > 🍅想要获取完整文章或者源码,或者代做,拉到文章底部即可与我联系了。🍅
跟尚西学PowerBI1 天前
大数据·人工智能·数据分析·openclaw
【供应链AI实践案例】OpenClaw+PowerBI 打造 AI 智能库存预警实战#你的 Agent 能解决什么真问题?# #自动化 Agent# #办公 Agent#大家好,今天结合真实业务场景,分享如何用OpenClaw 自动化 Agent+PowerBI,搭建一套可落地的AI 智能库存预警系统,不玩概念、只讲业务闭环,帮企业真正解决库存管理痛点。
YangYang9YangYan1 天前
学习·数据挖掘·数据分析
2026运营岗位学习数据分析对于提升个人能力的价值证书优势(1)提升数据分析能力CDA 认证涵盖了数据分析的各个方面,包括数据采集、处理、分析和可视化等。通过 CDA 认证的学习和考试,可以系统地掌握数据分析的知识和技能,提升自己在数据分析方面的能力。
Soari1 天前
人工智能·数据分析·科学计算·科研工具·aiagent·claudecode·ai技能库
科研与工程的 AI 助推器:深度拆解 scientific-agent-skills,为你的智能体注入专家级灵魂发布日期: 2026-05-14标签: #AIAgent #科研工具 #数据分析 #ClaudeCode #科学计算 #AI技能库
SelectDB1 天前
大数据·数据库·数据分析
Agent 应用范式下,企业数据基础设施如何演进?过去一年,Agent 正从一个技术概念,逐渐变成企业智能化落地的核心入口。这背后并不只是应用形态变化,更像是一场新的接口革命:人不再需要理解每一个工具的使用方式,也不再需要在不同系统之间反复切换;人只需要表达目标,Agent 则负责理解意图、拆解任务、选择工具、调用数据并完成执行。