金融大模型

FinGPT

FinGPT v3 系列是在新闻和微博情绪分析数据集上使用 LoRA 方法进行微调的LLM,在大多数金融情绪分析数据集上取得了最佳分数。

FinGPT v3.1 使用 chatglm2-6B 作为基础模型;

FinGPT v3.2 使用 llama2-7b 作为基础模型.

FinGPT V2

用LLaMA和LoRA在美国金融市场训练我们自己的FinGPT

FinGPT V1

用 ChatGLM 和 LoRA 在中国金融市场训练我们自己的 FinGPT

FinGPT 的目标

实时数据管理流水线使 FinGPT 数据民主化

轻量级调整,使 FinGPT 模型对于个人和机构民主化(频繁更新)

支持各类金融应用

FinNLP 为所有对LLM和 NLP 感兴趣的人提供了一个游乐场。 在这里,我们提供金融领域LLM训练和微调的完整渠道。 完整的架构如下图所示。

端到端框架:FinGPT 采用具有四层的 FinLLM 全栈框架:

  • 数据源层:该层确保全面的市场覆盖,通过实时信息捕获解决金融数据的时间敏感性。
  • 数据工程层:该层面向实时 NLP 数据处理,解决了金融数据中高时间敏感性和低信噪比的固有挑战。
  • LLMs层:该层专注于LoRA等一系列微调方法,减轻了金融数据的高度动态性,确保了模型的相关性和准确性。
  • 应用层:展示实际应用和演示,凸显FinGPT在金融领域的潜在能力。

FinGPT LLM 层使用的开源基础模型

相关推荐
Juicedata29 分钟前
JuiceFS v1.3-Beta2:集成 Apache Ranger,实现更精细化的权限控制
运维·人工智能·ai
Work(沉淀版)3 小时前
DAY 40
人工智能·深度学习·机器学习
蓦然回首却已人去楼空3 小时前
Build a Large Language Model (From Scratch) 序章
人工智能·语言模型·自然语言处理
CM莫问4 小时前
<论文>(微软)WINA:用于加速大语言模型推理的权重感知神经元激活
人工智能·算法·语言模型·自然语言处理·大模型·推理加速
拾忆-eleven4 小时前
NLP学习路线图(二十六):自注意力机制
人工智能·深度学习
MYH5165 小时前
在NLP文本处理中,将字符映射到阿拉伯数字(构建词汇表vocab)的核心目的和意义
人工智能·深度学习·自然语言处理
程序员的世界你不懂5 小时前
Appium+python自动化(八)- 认识Appium- 下章
python·appium·自动化
要努力啊啊啊5 小时前
KV Cache:大语言模型推理加速的核心机制详解
人工智能·语言模型·自然语言处理
恸流失5 小时前
DJango项目
后端·python·django
Julyyyyyyyyyyy6 小时前
【软件测试】web自动化:Pycharm+Selenium+Firefox(一)
python·selenium·pycharm·自动化