主要的有点就是快，用途就是用于文本分类，模型结构如上，主要是通过embedding将文本转换成向量，然后进行mean-pooling，然后输入到hidden隐向量中，通过softmax输出多分类，损失函数是对数似然损失函数（log-likelihood loss）.
Bag of Tricks for Efficient Text Classification（FastText）
WitsMakeMen2023-10-22 13:48
相关推荐
vlln几秒前
【论文速读】递归语言模型 (Recursive Language Models): 将上下文作为环境的推理范式玄同7655 小时前
告别 AgentExecutor：LangChain v1.0+ Agent 模块深度迁移指南与实战全解析阿杰学AI6 小时前
AI核心知识74——大语言模型之ReAct 范式（简洁且通俗易懂版）2501_948120156 小时前
大语言模型与爬虫技术融合的智能数据采集系统DisonTangor6 小时前
美团龙猫开源LongCat-Flash-LiteAI浩12 小时前
PaddleOCR-VL-1.5：迈向用于鲁棒真实场景文档解析的多任务9亿参数视觉语言模型小芳矶13 小时前
【langgraph+postgres】用于生产环境的langgraph短期记忆的存取（postgreSQL替代InMemorySaver）阿杰学AI14 小时前
AI核心知识73——大语言模型之Shared Vector Space（简洁且通俗易懂版）Loo国昌1 天前
【Transformer解析】第二阶段：深度解析Encoder、Decoder与Encoder-Decoder架构Hugging Face1 天前
推出 AnyLanguageModel：在 Apple 平台统一本地与远程大语言模型的 API