Playground V3:图形设计模型的文字处理新标杆
Playground V3[1] 是一个专注于图形设计的模型,之前公开测试了 beta 版本。最近,其创始人发布了一段宣传片、技术报告和基准测试,展示了该模型在文字处理能力上全方位超越现有的一众模型,包括最新的 Flux pro 和 Ideogram 2.0。创始人还透露,V4 版本已经在研发中,关注我,为你持续跟进最新动态。
DeepSeek 推出开源多模态模型 Janus
Janus[2] 是 DeepSeek 推出的首个多模态模型,一个基于 DeepSeek-LLM-1.3b-base 和 SigLIP-L 的 1.3B MLLM,解耦了视觉编码,适用于多模态理解和生成。此模型基于 DeepSeek 1.0 开源许可协议,完全允许商用,是 DeepSeek 在多模态领域的一大步!
Meta Spirit LM:自由混合文本和语音的多模态模型
Spirit LM[3] 是 Meta 的首个能够自由混合文本和语音的多模态语言模型。它不仅理解语言的含义,还能捕捉并再现说话的音调、情感和风格。Spirit LM 支持文本和语音的输入输出,分为 Base 和 Expressive 两个版本。不过开源的模型 7B 参数量,推理能力一般。
微软 BitNet:CPU 加速运行 LLM 的新突破
BitNet[4] 是微软开源的一项技术,旨在无损加速运行大型语言模型(LLM)。与 llama.cpp 相比,BitNet 在 ARM CPU 上实现了 1.37 倍到 5.07 倍的加速,而在 x86 CPU 上则可实现 2.37 倍到 6.17 倍的加速。官方提供了一段演示视频,速度非常的快。目前,BitNet 仅支持 CPU,但未来计划扩展至 NPU 和 GPU。关注我,为你持续跟进最新动态。
UVR5 UI:高效分离人声与伴奏的开源工具
UVR5 UI[5] 是基于 python-audio-separator[6] 的开源 WebUI,支持大量模型和批处理功能。如果你需要分离人声和伴奏,这款工具绝对不容错过。不过,要注意的是,HF Space 上的版本运行速度较慢,建议直接使用 Colab 版本以获得更好的体验。
Tex4D:文本+3D 模型引导视频生成
Tex4D[7] 是一项创新技术,它巧妙地将 3D 模型与视频生成模型相结合,能够在不同视角和帧之间保持一致性。看着非常不错,角色一致性新思路。