gensim conherence model C_V 值与其他指标负相关BUG

在我用gensim3.8.3 conherence model分析京东评论主题模型时, C_V 与npmi、u_mass出现了强烈的皮尔逊负相关:

这些地方也反映了类似问题:

https://github.com/dice-group/Palmetto/issues/12

https://github.com/dice-group/Palmetto/issues/13

https://github.com/dice-group/Palmetto/issues/76

按道理来说,这些一致性评分都是越高越好。这里是怎么回事呢?

原来是原实现代码的gamma值搞错了,应该设置为1而不是2:

https://github.com/dice-group/Palmetto/issues/81

ps:截至2023.07.27,我电脑里的gensim版本还是3.8.1,没有更新到最新版的gensim(4.3.0),因此不知道gensim是否已修复此问题。肯折腾的朋友可以去尝试一下

相关推荐
大神薯条老师11 小时前
Python零基础入门到高手8.4节: 元组与列表的区别
开发语言·爬虫·python·深度学习·机器学习·数据分析
lilye6612 小时前
精益数据分析(55/126):双边市场模式的挑战、策略与创业阶段关联
大数据·人工智能·数据分析
码上地球12 小时前
因子分析基础指南:原理、步骤与地球化学数据分析应用解析
大数据·数据挖掘·数据分析
RE-190112 小时前
PowerBI基础
数据分析·powerbi·思维导图·bi工具·数分工具
lilye6616 小时前
精益数据分析(56/126):创业阶段的划分与精益数据分析实践
数据挖掘·数据分析
lilye6619 小时前
精益数据分析(62/126):从客户访谈评分到市场规模估算——移情阶段的实战进阶
数据挖掘·数据分析
olllo.top1 天前
从 Excel 到 Data.olllo:数据分析师的提效之路
数据分析·excel
Leo.yuan1 天前
可视化数据图表怎么做?如何实现三维数据可视化?
大数据·信息可视化·数据挖掘·数据分析·数据服务
%d%d21 天前
undefined reference to CPUAllocatorSingleton::instance
bug
Leo.yuan2 天前
3D 数据可视化系统是什么?具体应用在哪方面?
大数据·数据库·3d·信息可视化·数据分析