友思特应用 | FantoVision边缘计算:多模态传感+AI算法=新型非接触式医疗设备

导读

基于多模态传感技术 和先进人工智能 技术可有效提升乳腺癌检测的精准性、性价比和效率。友思特 FantoVision 边缘计算机 则为其生物组织数据的高效传输和实时分析提供了坚实基础。


乳腺癌的新型医疗检测方式

乳腺癌是女性面临的最令人担忧的健康问题之一,早期发现和积极的患者监测对生存至关重要。在早期发现和治疗时,治愈的机会很高。而乳腺X线摄影、超声波和 MRI 等标准乳腺癌诊断方法存在各种局限性,例如电离辐射、高假阳性率和高昂的治疗/检查费用。

ThermoMind 利用最新的多模态传感技术 和先进的人工智能 ,来追踪与癌细胞引起的代谢异常相关的数字生物标志物,从而实现了高效的乳腺癌检测。这种创新的辅助生理成像技术采用最先进的红外传感器和复杂的计算机处理来创建数字皮肤,监测与癌细胞活动相关的代谢和血管变化相关的 300 多个数据点

FantoVision:高带宽图像采集和AI处理

实现多模态传感器技术与先进的 AI 分析精度相结合的医疗设备,其主要挑战在于:如何在捕获多个高分辨率图像数据流 的同时实时处理 图像。而传统的嵌入式视觉系统在相机高带宽数据传输场景下,则需要解决如何实现与嵌入式系统的高速实时数据的吞吐 、嵌入式设备的负载消耗 、以及采用云部署的高成本开发等问题。

友思特 & Gidel 的FantoVision 是解决上述困境的理想的解决方案。FantoVision 是一款专为高带宽成像而设计的紧凑型嵌入式计算机,其架构使用 NVIDIA Jetson 嵌入式计算机,将高端图像采集与实时图像处理和/或压缩结合起来,并使用英特尔 Arria 10 FPGA 进行可选的预处理/压缩 IP。支持最流行的高带宽相机接口 10GigECoaXPressCamera Link 。由于其紧凑型嵌入式平台的特征,FantoVision 的尺寸仅为 134 × 90 × 60 mm,因此可以轻松集成 到医疗设备外壳中。最高可达 50Gb/s 的速度进行图像采集和处理,15 个数据流同时以每秒 30-60 帧的速度捕获高分辨率图像,通过在 FantoVision 边缘计算机上集成专有的压缩算法,实现数据流的压缩,然后传输到 AI 模组/云端进行 AI 处理。

应用案例

ThermoMind 开发的Vision One,利用先进的多模态传感技术作为数据源,在设计时充分考虑了患者的舒适性和隐私性。其独特的结构特点是在胸部高度有一个大环,连接到控制台,装有多个红外和深度传感器,针对患者的胸部和腋窝,以捕捉全面的 180° 视图。

Vision One(图片来源:ThermoMind)

这些图像通过部署在 FantoVision 上复杂的 AI 算法进行实时分析 ,提供可操作的见解,例如血管映射和代谢异常检测,从而显着增强临床决策。该设备集成了长波红外 (LWIR)、近红外 (NIR) 和 3D 成像 ,以收集有关乳腺组织中热、血管和结构变化的详细数据。由 FantoVision 边缘计算机上提供的专有图像压缩算法进行数据流的压缩,然后传输到人工智能组件/云端分析捕获的数据以识别癌症的数字生物标志物,从而协助风险评估并简化诊断过程。

诊断与成像示意图(图片来源:ThermoMind)

了解更多? 欢迎探索丰富案例:https://viewsitec.com/gidelfantovisionpara/

相关推荐
MonkeyKing_sunyuhua几秒前
VSCode + Cline AI辅助编程完全指南
ide·人工智能·vscode
Leinwin7 分钟前
Microsoft Azure 服务4月更新告示
人工智能·azure
胡耀超10 分钟前
霍夫圆变换全面解析(OpenCV)
人工智能·python·opencv·算法·计算机视觉·数据挖掘·数据安全
jndingxin18 分钟前
OpenCV CUDA 模块中用于在 GPU 上计算两个数组对应元素差值的绝对值函数absdiff(
人工智能·opencv·计算机视觉
jerry60919 分钟前
LLM笔记(五)概率论
人工智能·笔记·学习·概率论
硅谷秋水20 分钟前
学习以任务为中心的潜动作,随地采取行动
人工智能·深度学习·计算机视觉·语言模型·机器人
Tiny番茄1 小时前
Multimodal models —— CLIP,LLava,QWen
人工智能
Wnq100721 小时前
工业场景轮式巡检机器人纯视觉识别导航的优势剖析与前景展望
人工智能·算法·计算机视觉·激光雷达·视觉导航·人形机器人·巡检机器人
无心水2 小时前
【程序员AI入门:模型】19.开源模型工程化全攻略:从选型部署到高效集成,LangChain与One-API双剑合璧
人工智能·langchain·开源·ai入门·程序员ai开发入门·程序员的 ai 开发第一课·程序员ai入门
有梦想的攻城狮2 小时前
大语言模型与多模态模型比较
人工智能·语言模型·自然语言处理·llm·大语言模型