解决警告Creating a tensor from a list of numpy.ndarrays is extremely slow.

  • 我的问题是创建一个列表x=[],然后不断读入数据使用x.append(sample),chatgpt说这样转化比较低效,如果预先知道样本个数,可以用numpy来创建数组,再用索引x[i]=sample赋值
  • 第二种方法更快,直接用numpy转化一下np.array(list_of_ndarrays)

这个警告是因为你在将一个包含多个 numpy ndarrays 的列表直接转换为 PyTorch 的 tensor。这样做会非常慢,建议先将这些 ndarrays 转换为单个 numpy ndarray,然后再转换为 tensor。你可以按照以下步骤来实现这一点:

  1. 将列表转换为 numpy ndarray :使用 numpy.array() 将列表中的多个 numpy ndarrays 合并为一个单一的 numpy ndarray。
  2. 将 numpy ndarray 转换为 PyTorch tensor :使用 torch.tensor()torch.from_numpy()

以下是一个示例代码:

python 复制代码
import numpy as np
import torch

# 假设你有一个包含多个 numpy ndarrays 的列表
list_of_ndarrays = [np.array([1, 2, 3]), np.array([4, 5, 6]), np.array([7, 8, 9])]

# 将列表转换为单个 numpy ndarray
combined_ndarray = np.array(list_of_ndarrays)

# 将 numpy ndarray 转换为 PyTorch tensor
tensor = torch.tensor(combined_ndarray)

print(tensor)

这样做不仅可以避免警告,还能提高代码的效率。

相关推荐
SugarFreeOixi1 天前
MATLAB绘图风格记录NP类型
python·matlab·numpy
小陈工2 天前
FastAPI性能优化实战:从每秒100请求到1000的踩坑记录
python·性能优化·django·flask·numpy·pandas·fastapi
REDcker2 天前
CentOS 与主流 Linux 发行版历史与版本综述
linux·centos·numpy
百年੭ ᐕ)੭*⁾⁾3 天前
DataFrame存入mysql以及读取操作
数据库·mysql·numpy·pandas·ipython
TheLegendMe5 天前
NumPy 矩阵操作 + 图像处理
图像处理·矩阵·numpy
李昊哲小课5 天前
NumPy轴方向统计在多维数据分析中的应用
python·数据分析·numpy
李昊哲小课6 天前
NumPy 完整学习笔记
笔记·python·学习·数据分析·numpy
好家伙VCC6 天前
**NumPy中的高效数值计算:从基础到进阶的实战指南**在现代数据科学与机器学习领域
java·python·机器学习·numpy
MediaTea6 天前
NumPy:ndarray 数组属性
numpy
Jia-Hui Su6 天前
Python类型标准(Type Hints)详解
开发语言·python·numpy·pyqt·ipython·python3.11