20241218_segmentation

参考:

  1. 使用SA模型 https://ai.meta.com/research/publications/segment-anything/
  2. 讲解生物学意义 https://www.nature.com/articles/s41593-024-01714-3#Sec13

x.0 workflow

  1. 图像分割方法识别出重要的ROI区域
  2. 计算ROI区域个数(需要计算机算法,参考论文OpenCV可以做到)
  3. 用交并比知识计算两个ROI区域的重合度,大于一定值则算叠加态

x.1 使用 segmentation anything 尝试解决

网址https://segment-anything.com/demo meta自带方式解决,


问题:红色图像信噪比很差很难分割出来;绿色图像背景信噪比较高;

解决方案:增加阈值法;高斯滤波;背景扣除;形态性滤波;

x.2 优化

  1. 使用聚类

识别数量1,不佳;

  1. 使用otsu阈值法,形态性去除背景法

彩色识别的区域数量明显上升,但是仍然有很多需要黑色的地方未识别出来。


信噪比好的图片不做处理效果也很好;

x.3 改进方法

可能原因:

查阅论文 https://ai.meta.com/research/publications/segment-anything/ 虽然训练数据集高达1 billion,但是缺少医学相关数据,且对色彩饱和度照片效果好,对信噪比较差的如生物成像效果差;

改进方法:

  1. 增加标注工作制作专用数据集
  2. 寻找更多的数据处理方法,如增加信噪比优化的方法
  3. 实验过程中增加信噪比(最立竿见影的方法),如曝光时间
相关推荐
shirsl1 小时前
算法 Day1-数组 / 哈希 + 双指针
python·算法·哈希算法
广州山泉婚姻7 小时前
Python序列号源码分析
python
计算机源码社7 小时前
【大数据项目实战】基于大数据的影视内容生态综合质量分析与可视化-基于数据挖掘的影视内容类型共现与口碑聚类分析系统
大数据·人工智能·python·数据挖掘·数据分析·毕业设计·课程设计
C^h8 小时前
pytorch 适合初学者 0基础学习
人工智能·pytorch·python
小柯南敲键盘8 小时前
跨马翻译:AI批量图片翻译工具,跨境电商视频字幕翻译与智能抠图一体搞定
人工智能·python·音视频
2601_962297258 小时前
Python里behave和pytest-bdd哪个更适合中大型项目?为什么?
python·bdd·行为驱动开发·behave·pytest-bdd
YCOSA202510 小时前
系统工具使用检测.exe (仅供娱乐)
python·microsoft
2601_9622953310 小时前
如何python实现网页的自动化
python·selenium·beautifulsoup·requests·网页自动化
ofoxcoding10 小时前
GPT Image 2.5 API 实战:Python 调用实现图片生成与编辑
人工智能·python·gpt·ai
张小姐的猫11 小时前
【AI大模型接入SDK】 —— Gemini接入封装
android·数据结构·数据库·c++·人工智能·python