图像处理ASIC设计方法 笔记8 卷积计算芯片的结构

(一)

P81 卷积芯片内部模板框图

该设计有两个数据通路:图像数据和模板数据 。

图像数据是经过帧控制、实时图SPRAM(写控制、 SPRAM读控制、数据读控制)、计算单元;

模板数据是经过模板SPRAM、计算单元。

4.5.4运算单元像素寄存器控制

存储SPRAM写入的64bit数据,输出为8bit。它是属于图像数据的路径。

当处于读操作时,输出的读使能信号fifo_rd_en ,该信号可以使FIFO读出数据并写入SPRAM中。那这个模块是实时图SPRAM模块里的写控制、SPRAM读控制、数据读控制。

图像SPRAM地址控制:SPRAM中滚动存放32行像素,为了同时读出相邻4行数据,写入数据按行在4个块中依次循环存放。32*40像素模板卷积运算分8次局部卷积运算完成。

(二)

P90 计算模块的结构:

乘法器1个,后面是加法器6个,这样组成的流水线。同时有6组数据在依次滚动,走的流水线深度是7拍(乘法器1个+加法器6个)。第六组数据刚进入第一个拍(乘法器)的时候,此时第一组数据在第六个拍(加法器5)处理。

计算模块大小是4行40列,整个卷积设计的大小为32行40列,数据缓存是对计算模块的大小来定的(4行40列)。整个卷积设计是调用8次计算模块("32行40列"是"4行40列"的8倍),把每次的计算模块结果进行累加。

计算模块的结果在另一个位置缓存,每次的结果与对应位置的数据累加后还写入该位置。这个位置的寄存器设置的位宽是26bit。(最初的像素数据是8bit,经过一次乘法和六次加法,结果是22bit,22bit累加8次,最终设定的计算结果是26bit)

(三)

补充搜索的资料 卷积芯片的新设计方式:

光学卷积处理器OCPU(Optical Convolution Processing Unit)是一种基于光学计算的技术,它使用光学器件和光学现象进行信息处理和计算。光学能够同时处理多个信息,从而实现高效的并行计算。

中国科学院半导体研究所集成光电子国家重点实验室微波光电子研究组开发了一种超高集成度光学卷积处理器,相关研究成果发表在《Nature-Communications》上。这项技术在人工智能领域具有广阔的前景。光学计算是一种利用光波作为信息处理载体的技术,具有带宽大、延迟低、功耗低的优点。

相关推荐
2501_933670792 分钟前
医药市场分析岗位适合应用统计学学生吗,需要考什么证
人工智能
水獭比特4 分钟前
Agent 工具审批不止一个按钮:用 v0.22.1 复盘入口、恢复和副作用
人工智能·python
网络毒刘6 分钟前
Token 用量观测实战:从会话结构拆前缀/工具/生成,建立个人降本仪表盘
人工智能·性能优化·token·cursor
库拉镜像AI牛牛6 分钟前
短剧内容自动化生产:知漫剧工作室落地教程
大数据·服务器·前端·人工智能·语音识别
IamZJT_6 分钟前
Agent 系统工程 09|Agent 的可靠性怎么测?成功率、恢复能力与成本
人工智能
AI你一生一世11 分钟前
当AI在数学中“失准”:一场关于形式化、直觉与工程取舍的深度复盘
人工智能·大语言模型·数学推理·ai对齐·形式化验证·推理模型·语义漂移
盟接之桥15 分钟前
AI助手:你的7×24小时智能管家——让异常预警无处不在
大数据·网络·数据库·人工智能·制造·ai编程
llqbzllll15 分钟前
Agent Skills 为什么不能只是“长提示词”:SKILL.md、按需加载和权限边界
人工智能
“AI国潮设计-小江”36 分钟前
《Python+SDXL实战:用ControlNet批量生成“英歌舞麻将糕”IP,附自动化脚本与商用思路》
开发语言·人工智能·python·prompt·aigc
具身AGI37 分钟前
从Demo到货架,全栈自研 物理AI 的验收标准
人工智能