数据分析

三兔测序学社17 小时前
数据分析
【零代码生信分析】RNA-seq中级分析8-差异基因集在L2S2网站进行【肿瘤药物】筛选分析网站:https://l2s2.maayanlab.cloud/“基于整合网络的细胞特征图谱库”(LINCS)共同基金计划旨在构建一个人类癌细胞系对多种多组学和表型扰动反应的参考数据库。作为LINCS计划的一部分,248种细胞系通过L1000转录组学检测技术,测量了对33,621种小分子和7,508个单基因CRISPR敲除(KO)的反应。从这些大规模数据中,我们计算了上调和下调的基因集。这些基因集可通过LINCS L1000签名搜索(L2S2)平台进行检索。L2S2平台在搜索超过167.8万种化学扰动和C
追风少年ii1 天前
数据分析·空间·单细胞
六大空间转录组平台全面对比:Visium、Visium HD、Stereo-seq、Xenium、Atera 与 CosMx
roman_日积跬步-终至千里1 天前
数据仓库·人工智能·机器学习·数据分析·数据建模
【数据建模入门】从一家小店看懂数仓与机器学习:先理业务,再串技术学习数据建模时,很容易先遇到一串术语:事实表、维度表、RFM、特征、标签、训练集。知道定义之后,仍然不清楚它们为什么存在,更不知道怎样连接起来。
钱工的门窗技术笔记1 天前
物联网·架构·数据分析
室内极窄全景移门的支承路径与预留接口:轨道形式、型材壁厚口径与验收边界一、范围与术语 本文讨论安装于室内隔断位置的铝合金玻璃移门,包括地轨式、吊轨式、单边固定式以及采用极窄边框的各类组合形式。不涉及外墙侧门窗的抗风压与水密性能,也不涉及家具类滑动门。 几个术语先行界定。可视边框指门扇闭合状态下,正视方向可见的框体宽度,与型材截面尺寸和遮挡构造相关,不等于型材宽度。有效通透面积指扣除边框遮挡后实际参与视线与采光传递的面积。承重滑轮指承担门扇竖向荷载的滑轮,导向轮仅限制侧向位移,两者功能不同,不可互相替代。
quantdash_cc2 天前
python·数据分析·pandas·量化交易·股票数据·quantdash
如何验证历史行情的交易日期是否完整覆盖研究区间?验证历史行情是否满足研究区间要求,不能只检查最早日期和最晚日期,而应该将实际返回的交易日期与研究区间内的预期交易日集合进行比较,同时检查缺失日期、重复日期和越界记录。对于量化回测,这一步可以避免因行情缺口导致收益率和因子计算出现偏差。实际开发中,可以通过 QuantDash Python SDK 获取指定区间的历史 K 线,再使用 Python 完成交易日完整性校验。
quantdash_cc2 天前
python·数据分析·pandas·量化交易·股票数据·quantdash
ETF 行情数据清洗实战:字段语义拆解、标的池整理与五个校验清单一句话结论:ETF 行情数据的可用性,八成取决于拿到数据之后的三件事——字段语义是否对齐、主键与时间轴是否干净、复权口径是否和策略计算逻辑一致;排序、去重和阈值告警反而排在后面。
Leo.yuan2 天前
人工智能·数据挖掘·数据分析
2026年可信AI数据分析平台研究:主流厂商的可信机制、能力边界与企业选型过去两年,AI 数据分析平台经历了一轮从概念到落地的快速迭代。企业从最初的新鲜感,逐渐转向一个更务实的问题:AI 给出的分析结果,能不能进入真实的决策流程。这个问题的背后,是可信机制这个过去被营销话术掩盖、如今被推到台前的核心命题。
Highcharts.js2 天前
javascript·人工智能·数据分析·highcharts·图表开发
CSUN 2026|Highcharts无障碍数据与AI分享今年,我们展示的演示允许用户通过人工智能辅助界面对图表中的底层数据提出直接问题。其目标不是取代传统导航,而是提供另一种探索方式。用户不再仅依赖结构化的键盘控制或预设的图表工具,而是可以通过有针对性的查询,关注趋势、异常值或关系。
梯度下降者2 天前
爬虫·python·数据分析·入门指南·webcrawler
零基础入门Python 爬虫网络爬虫, 也就是Web 那犹如互联网里一只从不晓得疲倦的“蜘蛛” , 它借由对人类浏览网页的行为予以模拟 , 自行从互联网之上抓取并且提取你所需要的公开数据。不管是开展数据分析 、进行竞品调研 , 又或者是做内容聚合 , 网络爬虫都是一项极为实用的技能。
benchmark_cc3 天前
python·数据分析·pandas·量化交易·股票数据·quantdash
用 Python 拉 A 股全市场实时快照:Notebook 请求、结果校验与易错点一句话结论:全市场快照真正花时间的往往不是“发请求”,而是拿到 DataFrame 之后那几行校验——代码是否齐全、有没有重复、价格关系是否成立、时间戳是否统一,以及非交易时段拿到的是不是上一交易日的静态值。
SelectDB3 天前
大数据·数据库·数据分析
Doris Arrow Flight SQL 高速读取协议实战:与 Snowflake 客户端取数链路对照大规模取数场景里,真正拖慢导出的往往不是 SQL 计算本身,而是结果从引擎搬到客户端这一程。Apache Doris 自 2.1 版本起对外开放 Arrow Flight SQL 端点,客户端用 ADBC 或切换 JDBC 协议头即可走 Arrow 列存直传;Snowflake 一端在官方文档中未检索到同类对外端点,结果以 Arrow 列存形式在驱动内部产出。两条链路的出发点一致——减少一次行存与列存之间的来回倒腾,但协议开放层级不同。本文以实战笔记的写法把开端口、接驱动、开并行、排错现场一步一步列出来,
Asa121383 天前
数据分析
Nature Ecology & Evolution|深层土壤病毒如何连接微生物残体形成与碳稳定化深层土壤储存了超过一半的陆地有机碳,但调控地下环境中碳持久性的病毒机制仍不清楚。研究人员通过对四类农业生态系统开展0—700厘米土壤剖面调查,并综合全球地下土壤宏基因组,建立了深层土壤病毒资源数据库,包含50,949个病毒操作分类单元和3,902个辅助代谢基因。病毒丰富度随深度显著增加,同时伴随由碳可利用性下降驱动的溶原性转变。深土病毒组携带参与聚合物降解及细胞内裂解的辅助代谢基因和溶菌酶。病毒内溶素显著促进微生物残体碳积累,进而促进矿物结合态有机碳增加。对全球138个土壤剖面的综合分析进一步揭示,病毒丰
SelectDB4 天前
大数据·数据库·数据分析
实时更新排错现场:导入了却查到旧数据,和 FINAL 越加越慢的两条路记一次实时更新链路的排错现场:同一张宽表,写入侧明明显示成功,业务查询却读到旧状态;加上查询修饰符后旧数据没了,查询延迟又上去了。排查到底层发现这不是 bug,是两种去重时机的差异——Apache Doris 的 Unique Key(Merge-on-Write)在导入事务内收敛主键,查询永远单版本;写入后收敛的路线(ReplacingMergeTree + FINAL)则要等后台合并或在查询时补课。现场处理过程和验证命令都记在这篇里。
SelectDB4 天前
大数据·数据库·数据分析
拿 Planet 的账单一行行对下来,我总结出三个可自查的校验点摘要:最近做迁移收益评估,把 SelectDB 官方博客公开的 Planet(全球金融科技公司)从 Snowflake 迁到 Apache Doris 的账单逐行拆了一遍:月成本 25,000降到25,000 降到 25,000降到5,000(-80%),4.75 亿行查询从 45–90 秒降到 1–3 秒,实时摄入从 5–10 分钟降到 1–2 秒。单案例不等于普遍收益,所以这篇的重点不是复述数字,是把"我能不能拿到同量级收益"拆成三个可以在自己环境里跑的校验动作,每个校验给命令和判读标准。
SelectDB4 天前
大数据·数据库·数据分析
Apache Doris + Vane:让多模态数据进入业务分析订单、工单和生产批次已经进入数据库,但客户对产品的很多具体反馈,仍然存在客服录音、文字记录和附件中。当团队想知道“还有哪些客户遇到了类似问题?这些反馈分别对应哪些生产批次?”时,通常需要先听录音、整理问题描述,再回到业务系统逐一核对。不同类型的数据虽然都已经存在,但还很难直接放在一起查询和分析。
小里lilili4 天前
金融·数据分析·numpy
金融数据分析技术栈拆解:从NumPy到机器学习,金融数学背景该如何补齐代码短板金融数学专业应届生想入职金融数据分析岗,需要掌握Excel、SQL等数据处理工具,基础统计建模能力,对应细分金融业务逻辑,优先补充银行证券等对口实习,按需考取对应能力证明。这套准备路径仅适用于国内本科金融数学相关专业,毕业1年内想瞄准市场化机构金融数据分析岗的应届生,不适用于想走量化投研纯风控模型岗的同学。
wang_yb4 天前
数据分析·databook
用Python DSL 写轻量数据质检工具平时做经营分析或者跑日报,第一步往往不是画图,而是先面对一份"不太干净"的导出的明细表:重复的单号、位数对不上的手机号、莫名其妙的负数金额、格式乱掉的日期……
databook4 天前
python·数据分析
用Python DSL 写轻量数据质检工具平时做经营分析或者跑日报,第一步往往不是画图,而是先面对一份"不太干净"的导出的明细表:重复的单号、位数对不上的手机号、莫名其妙的负数金额、格式乱掉的日期……
程序员梅雨4 天前
大数据·数据仓库·学习·阿里云·数据分析
【从零开始学习数据仓库 | 第一篇】:维度建模理论写在前面:这是我学习数仓系列记录的第一篇,我会把每天学习时对工作重要的,难理解的东西记录下,我试着把 Kimball 维度建模的核心概念串成一条线——从“为什么数仓必须独立存在”讲起,再落到维度表、事实表、代理键、可加性这些基础零件上。文中会穿插一些我自己的理解方式,不一定严谨。
2601_966949654 天前
开发语言·python·数据分析·pandas·量化交易·股票数据·quantdash
Python 实战:如何统计五档盘口买卖盘总挂单量?附计算公式与代码一句话结论:五档盘口的买盘总挂单量等于买一至买五的委托数量之和,卖盘总挂单量等于卖一至卖五的委托数量之和。使用 Python 可以快速完成统计,并进一步计算买卖盘挂单量差值、委托量比和盘口不平衡指标。