技术栈
dpu
北冥有鱼被烹
1 个月前
dpu
·
mellanox
NVIDIA Bluefield DPU上的启动流程4个阶段分别是什么?作用是什么?
本文以Bluefield2为例,可以看到RSHIM实际上是Boot相关的集合。也能看到eMMC上的2个分区。 Bluefield硬件单元图:(尤其可以看到RSHIM在硬件形态上是一个单独的硬件) Bluefield接口图:
北冥有鱼被烹
1 个月前
dpu
·
mellanox
·
bluefield
微知-Bluefield DPU使用flint烧录固件报错MFE_NO_FLASH_DETECTED是什么?MFE是什么?
在DPU的fw操作flint的时候,很多命令都会报这个错误:MFE_NO_FLASH_DETECTED,早期很疑惑并且猜测MFE是Mellanox Firmware Engine。实际并不是,具体还得走到mellanox flash的代码,该部分代码是Mellanox flint的一个库。
yusur
2 个月前
网络
·
云原生
·
ai-native
·
dpu
产品探秘|开物——面向AI原生和云原生网络研究的首选科研平台
在当今高速发展的信息技术领域,特别是对于那些致力于前沿科技探索与实践的高校而言,拥有一款能够支持复杂网络业务研究与开发的平台至关重要。开物™数据网络开发平台(Data Network Development Platform,简称DNDP),是中科驭数根据现代数据中心、智算中心等场景下网络研发的新需求,面向高校及科研院所打造的软硬一体化开发平台。
yusur
3 个月前
网络
·
云原生
·
容器
·
kubernetes
·
云计算
·
dpu
基于DPU与SmartNIC的K8s Service解决方案
Kubernetes Service是Kubernetes中的一个核心概念,它定义了一种抽象,用于表示一组提供相同功能的Pods(容器组)的逻辑集合,并提供了一种方式让这些Pods能够被系统内的其他组件发现并访问。简单来说,Service提供了一种让客户端能够稳定地连接到后端Pods的机制,即使这些Pods会动态地创建、销毁或迁移。
I_belong_to_jesus
3 个月前
算法
·
npu
·
ai芯片
·
dpu
·
nvdla
NVDLA专题10:具体模块介绍——Planar Data Processor
平面数据处理器(Planar Data Processor, PDP)沿宽x高的前两个维度平面执行操作,在NVDLA版中,PDPD旨在实现池化层,module定义在NV_NVDLA_pdp.v。支持最大、最小和平均池化方法。平面内的几个相邻输入元素将被发送到非线性函数来计算一个输出元素。下图显示了最大池的一个示例。3x2相邻元素中的最大值是合并结果值
yusur
4 个月前
网络
·
计算机网络
·
云计算
·
dpu
中科驭数HADOS 3.0:以四大架构革新,全面拥抱敏捷开发理念,引领DPU应用生态
一家成功的大算力芯片公司,其核心壁垒必须是软硬兼备的,既要有芯片架构的强大技术壁垒,更要有持久投入的、生态兼容完备的软件护城河。HADOS,就是中科驭数的软件护城河。
yusur
5 个月前
spark
·
dpu
Spark基于DPU的Native引擎算子卸载方案
Apache Spark(以下简称Spark)是一个开源的分布式计算框架,由UC Berkeley AMP Lab开发,可用于批处理、交互式查询(Spark SQL)、实时流处理(Spark Streaming)、机器学习(Spark MLlib)和图计算(GraphX)。Spark 使用内存加载保存数据并进行迭代计算,减少磁盘溢写,同时支持 Java、Scala、Python 和 R 等多种高级编程语言,这使得Spark可以应对各种复杂的大数据应用场景,例如金融、电商、社交媒体等。
yusur
6 个月前
数据库
·
hive
·
spark
·
dpu
“Spark+Hive”在DPU环境下的性能测评 | OLAP数据库引擎选型白皮书(24版)DPU部分节选
近年来,大数据行业的蓬勃发展除了来自软件层的持续迭代与创新,更有赖于计算机硬件环境的持续优化,尤其是在芯片与操作系统国产化的大趋势下,硬件升级带来的性能提升、成本降低、并行处理能力优化、存储与网络优化、安全风险管控等均为数据引擎的发展提供了阶梯式进步的空间。
北冥有鱼被烹
7 个月前
rdma
·
dpu
·
mellanox
【DPU系列之】Bluefield 2 DPU卡的功能图,ConnectX网卡、ARM OS、Host OS的关系?(通过PCIe Switch连接)
核心要点:简要记录。图片来源:https://docs.nvidia.com/networking/display/bluefielddpuosv460/functional+diagram
北冥有鱼被烹
7 个月前
dpu
【DPU系列之】如何通过带外口登录到DPU上的ARM服务器?(Bluefield2举例)
本文以BF2为例举例说明如何通过带外口登录BF2上ARM服务器。需要把DPU的OOB、服务器、用户电脑都连接到同一网络。以便用户电脑能够访问OOB和服务器。
扫地的小何尚
7 个月前
人工智能
·
深度学习
·
llm
·
gpu
·
dpu
什么是DPU
在数据中心、DPU 或数据处理单元中移动数据的专家是一种新型的可编程处理器,将与 CPU 和 GPU 一起成为计算的三大支柱之一。