transformers

GitHub上Transformers项目将目标检测模型转换为onnx在 https://huggingface.co/models 中有很多模型。一般会将此类模型转换为onnx，然后通过OpenCV DNN、ONNX Runtime等供项目调用。

学习是生活的调味剂

在大模型开发中，是否需要先完整学习 TensorFlow，再学 PyTorch？在大模型开发中，是否需要先完整学习 TensorFlow，再学 PyTorch？其实都可以学，但关键在于顺序。更高效的做法是：先掌握 transformers 等高级库的基本使用，学会如何调整超参数。等模型调优有一定成果后，若希望更进一步，再去研究 TensorFlow、PyTorch 这类底层框架。

24 Transformers - 训练自然语言处理模型文本分类是一种常见的自然语言处理任务，它将标签或类别分配给文本。一些最大的公司将文本分类应用于各种实际应用中。最流行的文本分类形式之一是情感分析，它将标签（例如：积极、消极或中性）分配给一段文本。在开始之前，请确保你已安装所有必要的库：

19. Transformers - 文本领域的任务类在 Transformers 库中，可以对文本进行分类，包括文本分类（“sentiment-analysis” 或 “Text classification”）任务类、零样本文本分类（“zero-shot-classification”）任务类和命名实体识别（“ner”）任务类；可以实现文本生成，包括文本摘要（“summarization”）任务类、问答（“question-answering”）任务类、表格问答（“table-question-answering”）任务类、文本生成（“text-gene

22 Transformers - 训练计算机视觉模型图像分类意即为图像分配和标注一个”标签“或一个”分类“。与文本或音频分类不同，输入是构成图像的像素值。图像分类有很多的应用场景，例如检测自然灾害后的损伤、监测作物健康状况或帮助筛查医学图像中的疾病迹象等等。

17 Transformers - 音频领域的任务类在音频领域的任务中，包括实现音频分类的 AudioClassificationPipeline 任务类，能够自动识别语音的 AutomaticSpeechRecognitionPipeline 任务类，能够经文本转化为语音即语音合成的 TextToAudioPipeline 任务类和在没有任何鉴见的样本、训练模型下也能够对给定的语音进行推理分类的 ZeroShotAudioClassificationPipeline 零样本音频分类任务类。

13 Transformers - 使用Pipelien处理自然语言处理NLP 任务是最常见的类型之一，因为文本是我们进行交流的自然方式。为了让文本变成模型识别的格式，需要对其进行分词。这意味着将一段文本分成单独的单词或子词（tokens），然后将这些tokens转换为数字。因此，可以将一段文本表示为一系列数字，一旦有了一系列的数字，就可以将其输入到模型中以解决各种 NLP 任务！

09 Transformers - 训练现在，我们将看到如何在不使用Trainer类的情况下实现与上一节相同的结果。同样，我们假设您已经完成了第2节中的数据处理。这里有一个简短的总结，涵盖了你需要的一切：

12 Transformers - 使用Pipeline处理计算机视觉计算机视觉任务中最早成功之一是使用卷积神经网络（Convolutional Neural Networks，CNN）识别图像中的邮政编码。图像由像素组成，每个像素都有一个数值，使得将图像用像素值矩阵表示变得容易。每个像素值组合描述了图像的颜色。

10 Transformers - 任务容器类 Pipeline管道（pipelines）是使用模型进行推理的一种强大易用的方法；是从 Transformers库中抽取出大多数复杂代码构造而成的，用于提供完成特定功能的任务类集合，包括命名实体识别、掩码语言建模、情感分析、特征提取和问答等。

08 Transformers - 微调下面是我们如何在PyTorch中训练一个批处理的序列分类器：当然，只训练两个句子的模型不会产生很好的结果。为了得到更好的结果，你需要准备一个更大的数据集。

11 Transformers - 使用Pipeline处理音频音频和语音处理任务与其他模态略有不同，主要是因为音频作为输入是连续信号。与文本不同，原始音频波形不能像将句子分成单词那样整齐地分成离散的块。为了解决这个问题，原始音频信号通常以固定的间隔采样。如果在一个间隔内采样次数越多，采样率就越高，音频就越接近原始音频源。

40_Spring AI 干货笔记之 Transformers (ONNX) 嵌入TransformersEmbeddingModel 是一个 EmbeddingModel 实现，它使用选定的句子转换器在本地计算句子嵌入。

GitHub上Transformers项目中模型组织结构在 https://huggingface.co/models 中有很多模型。Transformers库采用模块化和分层设计，将模型结构、配置、分词器(Tokenizer)和实用工具分离，使得模型调用、训练和扩展变得简单。核心代码位于src/transformers目录下。

DeepSeek-OCR私有化部署—从零构建OCR服务环境光学字符识别（OCR）技术经历了从传统图像处理到深度学习的重要演进。早期OCR系统依赖于手工设计的特征提取器和规则引擎，在规整文档上表现良好，但在复杂场景下面临巨大挑战。随着深度学习技术的发展，特别是CNN和Transformer架构的兴起，OCR技术实现了质的飞跃。DeepSeek-OCR正是在这一技术背景下应运而生，代表了当前OCR领域的最先进水平。与传统OCR系统相比，DeepSeek-OCR摒弃了复杂的规则引擎，采用端到端的深度学习架构，在大规模多语言文本数据上训练，实现了更高的识别准确率和更强的

GitHub上Transformers项目中推理函数pipeline的使用Transformers是文本、计算机视觉、音频、视频和多模态模型(text, computer vision, audio, video, and multimodal model)领域最先进的机器学习模型的模型定义框架(model-definition framework)，可用于推理和训练。源码：https://github.com/huggingface/transformers，最新发布版本v4.57.1，license为Apache-2.0。

Spring AI 系列之十五 - RAG-ETL之二之前做个几个大模型的应用，都是使用Python语言，后来有一个项目使用了Java，并使用了Spring AI框架。随着Spring AI不断地完善，最近它发布了1.0正式版，意味着它已经能很好的作为企业级生产环境的使用。对于Java开发者来说真是一个福音，其功能已经能满足基于大模型开发企业级应用。借着这次机会，给大家分享一下Spring AI框架。

Gradio全解20——Streaming：流式传输的多媒体应用（3）——实时语音识别技术本章讲述流式传输的应用，包括音频、图像和视频格式的流式传输。本章讲述流式传输的应用，包括音频、图像和视频格式的流式传输。音频应用包括流式传输音频、构建音频对话式聊天机器人、实时语音识别技术和自动语音检测功能；图像应用包括基于WebRTC的摄像头实时目标检测；视频应用包括构建视频流目标检测系统。

Jackilina_Stone

transformers：打造的先进的自然语言处理github地址：https://github.com/huggingface/transformers

Hugging Face的Transformers核心模块：Pipelines(参数说明，各种模型类型调用案例)如果电脑配置不够可以参考文章《学AI-撸羊毛-免费GPU服务器-kaggle-每周30小时-可以进行数据训练，大模型微调》申请免费服务器执行代码。