前端 AI 开发实战:基于自定义工具类的大语言模型与语音识别调用指南

在人工智能技术快速发展的今天,将大语言模型(LLM)和语音识别(ASR)功能集成到前端应用中,已经成为提升用户体验、打造智能化应用的重要手段。本文将结合一段实际的 AI 工具类代码,详细讲解如何在前端项目中快速实现大语言模型交互与语音识别功能,帮助开发者快速搭建属于自己的 AI 应用。

一、核心功能概览

本文介绍的 AI 工具类主要实现两大核心功能:

  1. 大语言模型调用:支持通义千问、豆包等多种主流 LLM,通过传入文本 prompt 获取模型生成的内容。
  2. 语音识别:支持简体中文、英语、日语等多语言的音频文件识别,将语音转化为文字。

二、代码结构解析

1. 枚举类型定义

复制代码
export enum SupportLLM {
  TONGYIQIANWEN = "tongyiqianwen",
  VOL_DOUBAO = "voldoubao",
  MINIMAX = "minimax",
  DEEPSEEK = "deepseek",
}

export enum AsrLanguage {
  ZH_CN = "zh", // 简体中文
  YUE_CN = "yue-cn", // 粤语
  EN_US = "en", // 美式英语
  // 其他语言...
}

通过SupportLLMAsrLanguage枚举,将支持的大语言模型名称和语音识别语种进行标准化定义,方便后续代码调用和维护,避免硬编码带来的问题。

2. 常量配置

复制代码
const LLM_API_TOKEN = "大模型API认证信息";
const LLM_API_KEY = "大模型API认证信息";
const LLM_BASE_URL = "https://ai-hub-temp.baicizhan.com/temp_llm";
const DEFAULT_RES_TYPE = "online";
const ASR_BASE_URL = "https://ai-hub-temp.baicizhan.com/temp_asr/short/aliyun";
  • LLM_API_TOKENLLM_API_KEY 是调用大语言模型 API 所需的认证信息。
  • LLM_BASE_URL 是大语言模型 API 的基础 URL(目前已接入,根据实际接入的替换即可)。
  • DEFAULT_RES_TYPE 是默认的结果返回类型。
  • ASR_BASE_URL 是语音识别 API 的基础 URL(同上)。

3. 模型配置与管理

复制代码
export interface LLMModelConfig {
  name: SupportLLM;
  url: string;
}

export const LLM_MODEL_CONFIG: LLMModelConfig[] = [
  // 多种模型配置
];

LLMModelConfig接口定义了每个大语言模型的名称和对应的 API 地址,LLM_MODEL_CONFIG数组则统一管理所有支持的模型配置。通过这种结构化的方式,后续如果需要新增或删除支持的模型,只需修改数组内容即可,代码扩展性强。

  1. 核心功能函数

大语言模型调用函数

复制代码
export function CallLLM(
  input: string,
  model: SupportLLM = SupportLLM.TONGYIQIANWEN
) {
  // 查找模型配置
  const modelConfig = LLM_MODEL_CONFIG.find((config) => config.name === model);
  if (!modelConfig) {
    throw new Error(`Unsupported LLM model: ${model}`);
  }
  return fetch(modelConfig.url, {
    method: "POST",
    headers: { "Content-Type": "application/json" },
    body: JSON.stringify({
      token: LLM_API_TOKEN,
      key: LLM_API_KEY,
      // 其他参数
      prompt: input,
    }),
  });
}

CallLLM函数接收用户输入文本和指定模型(默认为通义千问),通过fetch向对应模型的 API 发送 POST 请求,携带认证信息和用户输入,获取模型生成的内容。请求返回的 Promise 对象可通过.then()链式调用进行结果处理。

语音识别调用函数

复制代码
export function CallAsr(file: File, language: AsrLanguage = AsrLanguage.ZH_CN) {
  const formData = new FormData();
  formData.append("audio_file", file);
  // 添加认证和配置参数
  return fetch(ASR_BASE_URL, {
    method: "POST",
    body: formData,
  });
}

CallAsr函数接收音频文件和识别语言(默认为简体中文),通过FormData封装文件和请求参数,使用fetch向语音识别 API 发起请求,将音频转换为文字信息。

四、注意事项与优化方向

  1. 安全防护:实际项目中需将 API 密钥等敏感信息配置在后端或环境变量中,避免浏览器端暴露。
  2. 错误处理:当前代码仅做基础错误抛出,建议增加更细致的错误码解析(如权限问题、内容违规等),提升用户反馈的友好性。
  3. 性能优化:对于大语言模型的流式响应,可扩展代码实现实时数据更新,减少用户等待感。

通过这一 AI 工具类,开发者能够快速将强大的大语言模型和语音识别能力集成到前端应用中,为用户带来智能化的交互体验。随着 AI 技术的不断发展,后续还可以基于此框架扩展更多功能,如多模态交互、个性化模型定制等,开启更多创新可能。

相关推荐
小鸡吃米…1 小时前
机器学习 - K - 中心聚类
人工智能·机器学习·聚类
好奇龙猫2 小时前
【AI学习-comfyUI学习-第三十节-第三十一节-FLUX-SD放大工作流+FLUX图生图工作流-各个部分学习】
人工智能·学习
沈浩(种子思维作者)2 小时前
真的能精准医疗吗?癌症能提前发现吗?
人工智能·python·网络安全·健康医疗·量子计算
minhuan2 小时前
大模型应用:大模型越大越好?模型参数量与效果的边际效益分析.51
人工智能·大模型参数评估·边际效益分析·大模型参数选择
Cherry的跨界思维2 小时前
28、AI测试环境搭建与全栈工具实战:从本地到云平台的完整指南
java·人工智能·vue3·ai测试·ai全栈·测试全栈·ai测试全栈
MM_MS2 小时前
Halcon变量控制类型、数据类型转换、字符串格式化、元组操作
开发语言·人工智能·深度学习·算法·目标检测·计算机视觉·视觉检测
ASF1231415sd2 小时前
【基于YOLOv10n-CSP-PTB的大豆花朵检测与识别系统详解】
人工智能·yolo·目标跟踪
水如烟3 小时前
孤能子视角:“意识“的阶段性回顾,“感质“假说
人工智能
Carl_奕然3 小时前
【数据挖掘】数据挖掘必会技能之:A/B测试
人工智能·python·数据挖掘·数据分析
旅途中的宽~3 小时前
《European Radiology》:2024血管瘤分割—基于MRI T1序列的分割算法
人工智能·计算机视觉·mri·sci一区top·血管瘤·t1