【bug】通过lora方式微调sdxl inpainting踩坑

报错内容

ValueError: Attempting to unscale FP16 gradients.

报错位置

python 复制代码
                if accelerator.sync_gradients:
                    params_to_clip = (
                        itertools.chain(unet_lora_parameters, text_lora_parameters_one, text_lora_parameters_two)
                        if args.train_text_encoder
                        else unet_lora_parameters
                    )
                    accelerator.clip_grad_norm_(params_to_clip, args.max_grad_norm)

解决

https://github.com/huggingface/accelerate/issues/1778

相关推荐
闭月之泪舞1 小时前
OpenCv高阶(十)——光流估计
人工智能·opencv·计算机视觉
陶然同学2 小时前
RabbitMQ全栈实践手册:从零搭建消息中间件到SpringAMQP高阶玩法
java·分布式·学习·rabbitmq·mq
欧先生^_^3 小时前
学习 Apache Kafka
学习·kafka·apache
妙极矣3 小时前
JAVAEE初阶01
java·学习·java-ee
娃娃略3 小时前
【AI模型学习】双流网络——更强大的网络设计
网络·人工智能·pytorch·python·神经网络·学习
圆弧YH3 小时前
Ardunio学习
学习
我的golang之路果然有问题3 小时前
案例速成GO+redis 个人笔记
经验分享·redis·笔记·后端·学习·golang·go
韩明君4 小时前
前端学习笔记(四)自定义组件控制自己的css
前端·笔记·学习
Echo``4 小时前
12:图像处理—Blob分析+边缘提取
图像处理·算法·计算机视觉·视觉检测
暴龙胡乱写博客4 小时前
OpenCV --- 图像预处理(七)
人工智能·opencv·计算机视觉