pandas

观察员1 天前
pandas
用 Pandas 对抓取的电影数据进行分析基于上一步搭建 网络机器人 抓取的数据我们进行下一步的数据分析。如果你刚听到“数据分析”觉得高深莫测,别怕!今天我们将通过一个真实的电影案例,带你一步步拆解代码,浅浅体验一下 Python 数据分析界的大明星——Pandas。
人工干智能1 天前
python·pandas
科普:pandas 时间偏移别名:ts.resample(“5Min“).sum()ts.resample(“5Min”).sum()中,参数"5Min"看上去很特别,本文专门分析一下。
benchmark_cc6 天前
开发语言·人工智能·python·pandas·量化·quantdash
批量获取量化数据时,如何设置合理的超时和重试机制?——QuantDash 高性能实战指南批量获取股票行情数据时,网络抖动、服务端限流、单点故障都可能导致请求失败。合理的超时应设置为连接超时 5-10s、读取超时 30-60s;重试策略应采用指数退避(Exponential Backoff),初始间隔 1s,最大重试 3 次。 QuantDash 的 klines.batch() 原生支持批量拉取多只标的,结合 tenacity 或 backoff 库即可在极简代码内实现生产级容灾方案,无需自行维护复杂的重试状态机。
2601_966949656 天前
开发语言·python·pandas·tushare·akshare·quantdash
使用 Pandas 读取批量数据时如何避免内存溢出?QuantDash 量化数据工程师避坑指南使用 Pandas 读取批量量化数据时出现 MemoryError 的根本原因在于一次性将全量数据加载至内存。核心解决方案是分块处理(Chunking) + 数据类型优化(Downcasting) + 列式存储(Parquet) 。QuantDash Python SDK 原生支持将批量 K 线数据直接输出为 Pandas DataFrame,配合 klines.batch 接口与本地 Parquet 缓存,可在极简代码内实现海量行情数据的高效读取,彻底告别内存溢出。
三十岁老牛再出发7 天前
c++·python·numpy·pandas
08.18每日总结
虎头金猫10 天前
运维·服务器·网络·python·docker·容器·pandas
如何在群晖NAS上通过Docker部署CloudSaver?群晖部署CloudSaver教程|聚合资源搜索并实现远程访问平时保存的网盘链接和资源入口一多,很容易散落在不同页面、频道和收藏夹里。真正需要找某个文件时,经常要在几个平台之间反复切换,管理起来并不方便。
Uncommon.11 天前
pytorch·python·深度学习·pandas
使用pandas处理csv并转为张量需要先通过命令安装 pandas 包:然后通过以下方式,向文件中写入简单的 csv 格式数据:通过 read_csv 函数读取:
STR_Liang13 天前
pandas
pandas.read_html 报错FileNotFoundError、OSError Traceback (most recent call last)适配 Pandas 2.x / 3.x 所有版本,彻底解决跨设备报错核心逻辑:将 HTML 字符串包装为 内存文件流,强制让 pandas 识别为文本而非文件路径,规避新版版本路径判定BUG
㳺三才人子14 天前
python·plotly·pandas·matplotlib
初探 Data Analysis - Matplotlib前言本篇聚焦 Matplotlib 核心 API plt.plot() 之應用:涵蓋 折線圖(Line Plot)的時間序列趨勢解析,以及散佈圖(Scatter Plot)**的資料分佈與樣式調校實戰。從 StackExchange 取得每種程式語言的貼文總數作為實作資料來源。
quantdash_cc15 天前
开发语言·爬虫·python·pandas·量化·quantdash
告别自建 Requests/BS4 网页爬虫:基于 QuantDash 搭建零维保的高性能量化行情流水线量化交易开发中,使用 Requests/BS4/Selenium 编写网页爬虫面临反爬封禁、HTML 结构突变、复权因子计算复杂及多市场代码不统一等维保地狱。通过切换至标准化 Python 量化 API —— QuantDash (pip install quantdash),开发者只需几行原生代码即可直接获取经过服务器端精确复权(前复权/后复权)、涵盖 A 股/美股/港股(如 .SH, .SZ, .US, .HK)的标准 Pandas DataFrame 数据,将数据维护成本直接降为 0。本文将深入解析
菜冻鱼15 天前
开发语言·人工智能·python·机器学习·numpy·pandas·sklearn
Python-sklearn-模型选择sklearn.model_selection 模块提供交叉验证、超参数搜索、数据分割等全部模型选择工具。
菜冻鱼15 天前
开发语言·人工智能·python·机器学习·numpy·pandas·sklearn
Python-sklearn-评估指标sklearn.metrics 模块提供了分类、回归、聚类、排序等任务的评估指标。一键输出所有主要指标。
quantdash_cc15 天前
android·开发语言·pandas·量化·quantdash
基于 QuantDash 5 分钟 K 线的网格交易策略参数网格搜索寻优实战在日内网格交易中,网格密度(步长)与网格数量决定了策略的收益率与最大回撤。对 5 分钟 K 线进行网格搜索寻优的核心在于快速获取准确复权的高频 K 线数据并建立高效的回测引擎。使用 QuantDash Python SDK 可以通过 qd.klines.get() 一键获取服务器端前复权(adjust=‘forward’)的 5m K 线 DataFrame,避免本地复权计算误差与爬虫限频问题,分钟级完成参数网格搜索(Grid Search)。
FBI HackerHarry浩15 天前
开发语言·人工智能·python·pandas
Pandas 库中用于分类变量独热编码(One-Hot Encoding)的函数 pd.get_dummies() 函数pd.get_dummies() 是 Pandas 库中用于分类变量独热编码(One-Hot Encoding)的函数。它将分类变量转换为二进制(0/1)列的形式,每个类别对应一列。
yanweijie031719 天前
数据挖掘·数据分析·pandas
Pandas 完整数据分析工作流实战(标准 5 步流程)在日常数据分析、报表开发、机器学习预处理场景中,Pandas 是 Python 最核心工具。很多初学者零散学习各种 API,缺少一套标准化分析流程。本文结合 Pandas 架构思维导图,带你落地一套通用数据分析流水线:导入库 → 加载数据 → 数据清洗 → 特征构造 → 数据分析,可直接套用在业务数据集上。
菜冻鱼19 天前
开发语言·笔记·python·numpy·pandas·学习方法
Python-pandas-索引与筛选掌握 .loc、.iloc 和布尔索引是高效使用 Pandas 的核心技能。重要: 当索引是 0,1,2…时,.loc[1] 和 .iloc[1] 看起来一样但含义完全不同!
小趴蔡ha20 天前
人工智能·机器学习·pandas
04 Pandas 数据清洗实战:从表格读取到机器学习特征准备前面三篇分别介绍了机器学习流程、Python 环境和 NumPy 数组。真正进入项目后,我们通常不会马上调用模型的 fit(),而是先花时间理解数据:文件能否正确读取,每一列代表什么,有没有缺失、重复或格式错误,哪些字段可以作为特征。
cui_ruicheng20 天前
python·信息可视化·数据分析·pandas
Python数据分析(十四):Pandas 数据可视化目录一、为什么 Pandas 能画图1. 底层机制2. 为什么优先使用 Pandas 绘图二、单变量图表绘制
lkx0978822 天前
数据挖掘·数据分析·pandas
01-数据分析入门-Pandas实战写作日期:2026-08-04 | 来源:数据分析学习笔记(六步流程 + Pandas 实战) 关键词:Pandas、数据清洗、groupby、透视表、数据分析流程
淼澄研学24 天前
python·自动化·pandas
Python自动化办公实操:基于pandas与requests的5个提效场景解析在日常业务处理中,面对海量文件的整理与数据汇总,传统的手动操作往往耗费大量时间。Python作为一门解释型高级编程语言,凭借其丰富的标准库与第三方生态,成为解决此类自动化痛点的核心工具。本文基于Python Software Foundation发布的Python 3.10.12环境,梳理5个高频办公场景的自动化实现方案,提供从环境配置到代码落地的完整实操路径。 场景一:基于os与glob模块的文件批量重命名在财务审计或素材管理场景中,经常需要将数百个文件按统一规则重命名。手动操作不仅效率低下,且容易出现