大模型应用

minhuan3 天前
大模型应用·算子优化·大模型推理性能优化·多模型pipeline调度·内存访问优化
大模型推理性能优化指南:算子、内存访问、多模型Pipeline调度全方位优化实战解析27.4现在大模型已经越来越多的应用到了很多场景,智能问答、AI绘图、多模态推理、企业私有化部署等应用随处可见。但不管怎样,还是逃不掉一些核心难题:模型效果达标了,但运行速度慢、显存占用高、多模型并行卡顿、硬件资源浪费严重。很多时候我们并不是模型精度不够,而是底层运行和调度效率拖了后腿。
minhuan4 天前
chrome·大模型应用·大模型前端感知层工程·headless chrome·ai静默监听人脸动静检测
大模型前端感知层工程实践:基于Headless Chrome验证AI静默监听人脸动静检测逻辑27.2在AI人机交互产品中,感知层是连接大模型和真实用户的第一道关口。大模型本身擅长文本、对话推理,但无法直接感知物理世界里用户是否在场、是否正在操作设备。这类用户在场感知能力,通常由前端视觉模块承担:通过摄像头采集画面,识别人脸、画面运动,以此判断用户状态,驱动交互状态切换。
minhuan5 天前
websocket·大模型应用·心理访谈转录平台·流式vad采集·声纹聚类·websocket实时推送
心理访谈转录平台构建:流式VAD采集、声纹聚类、WebSocket实时推送全链路项目解析27.0青少年心理辅导沟通存在一个现实痛点:咨询师在现场沟通时,既要专注倾听、共情回应,又要手动记录对话内容,很容易分心,遗漏关键情绪信息。人工记录效率低,事后整理访谈笔录耗时巨大;而纯录音回放整理,无法快速定位对话片段、区分对话双方,也缺少风险标记、情绪标签、跟进备注等心理工作需要的业务能力。
中视会议7 天前
大数据·人工智能·大模型应用·视频交友·ai相亲
从 AI 深度交流到精准相亲匹配:实时音视频如何重构婚恋服务在传统相亲平台上,用户通常需要填写年龄、城市、职业、学历、兴趣等资料,然后浏览系统推荐的候选人。这些信息当然重要,但很难完整描述一个人。
minhuan9 天前
fastapi·faiss·insightface·大模型应用·人脸识别模型·本地化人脸识别系统
搭建本地人脸识别系统:解析FastAPI+InsightFace+FAISS全栈实现原理与优化方案26.6在当下身份认证场景中,传统账号密码登录存在记忆成本高、易泄露、易被破解等诸多短板,人脸生物识别凭借唯一性、便捷性、高安全性,已成为主流登录认证方案。市面上多数人脸登录系统依赖云端AI接口,存在网络依赖、数据上传隐私泄露、接口收费、响应延迟高等问题,无法适配内网、离线、私密办公等特殊场景。
minhuan12 天前
人工智能·flask·大模型应用·大模型业务集成·微服务架构演进
基于Playwright数据采集,大模型对接Flask+SQLite,平滑升级向量库与分布式微服务26.5现在我们做大模型应用时,基本都不需要从零搭建全新系统。很多时候我们需要在现有的业务系统上进行扩展完善,手上本来就跑着一套Python Flask后端,SQLite存业务数据,还有Playwright写的网页爬虫采集模块,业务跑起来稳定,但缺少智能能力。
minhuan15 天前
大模型应用·多模型兼容·模型切换·大模型高可用适配架构
大模型高可用适配架构:构建统一API网关,实现多模型兼容、重试、降级、限流机制26.2不知道大家在大模型应用过程中,是不是也会遇到模型碎片化、接口不统一、生产不稳定。早期为了快速落地,我们直接对接OpenAI系列模型的API,业务跑通后,出于数据安全、国产化合规、成本管控等需求,又需要接入各类国产大模型。不同模型的接口协议、请求参数、返回格式、错误码规则完全不同,每接入一个新模型,都要重复开发对接代码、适配异常逻辑、调试兼容问题,不仅开发效率极低,还会造成代码冗余、维护成本飙升。
GFDAGDS22 天前
人工智能·大模型应用·近屿智能
从课程设置看近屿智能AI培训:直播教学、AI互动学习与项目实战如何结合随着大模型技术逐步进入企业应用场景,AI人才培养的重点也在发生变化。相比单纯掌握模型概念和工具使用,当前AI应用类岗位越来越强调代码实践、项目开发、系统调试以及业务场景中的综合应用能力。 在这样的背景下,AI课程的评价标准也不再只是“课程内容覆盖多少”,还包括教学过程中能否提供持续反馈、是否安排足够的项目实践,以及学习内容与企业实际应用之间是否存在连接。 从近屿智能目前公开的课程资料来看,其AI课程主要采用真人直播教学、AI互动学习平台与项目实践相结合的方式,并通过助教答疑、作业训练和项目指导等环节,将不
虎虎(_ _)。゜zzZ22 天前
大模型应用·langgraph·agent框架·ai工程化·状态机 python
重构 Agent 思维链:LangGraph 核心架构的深度解构与实战早期的 LLM 应用开发,习惯用 Chain 的线性思维:输入、处理、输出。但真实业务场景远比这复杂——Agent 需要调用工具、根据工具结果决定下一步、甚至在出错时自我修正。线性 Chain 在这些场景下捉襟见肘。
梅雅达编程笔记1 个月前
python·智能客服·ai agent·意图识别·ai客服·大模型应用·ai办公自动化
Day 18 · 综合实战 B:AI 客服 Agent(专栏收官)「AI Python 系列」第 01 栏 · AI+办公自动化全栏 18 篇 · 零成本跟完 · 完结篇
minhuan1 个月前
大模型应用·流程监控·大模型ai服务工程化部署·ai服务运维·推理性能调优
大模型AI服务工程化部署与运维实践:推理性能调优、接口开发、监控告警全流程实操25.0如今大模型技术已经不再是实验室里的小众技术,各行各业都在落地AI大模型应用,智能问答、内容生成、智能办公、工业研判等场景,都离不开大模型服务的支撑。但不管是什么原因场景,我们都会遇到一个共性问题:本地调试完好无损的大模型,一旦部署到线上生产环境,就会出现各种问题。要么推理速度卡顿、延迟过高,要么并发请求直接打崩服务,要么接口调用异常无人察觉,还有资源占用过高、成本浪费严重的情况。
梦想的颜色1 个月前
大模型应用·ai 编程·codingagent·openclaw·piagent·agent 框架源码·2026ai 工具
Pi‑Agent 深度硬核解析:极简主义编程智能体,OpenClaw 底层内核源码剖析2026 年爆火的 OpenClaw(小龙虾)底层内核就是 Pi‑Agent。和 Claude Code、Codex CLI “大而全” 思路完全相反,Pi‑Agent 奉行核心极简主义:核心运行时仅约 1500 行 TS 代码,系统提示词不足 1000token,仅内置 4 个基础工具,却可以完成复杂工程编码任务。本文从背景、源码分层、Agent 循环、扩展机制、优缺点、横向对比、工程落地、面试考点完整拆解,搞懂 Pi,就能看透现代 Coding Agent 的本质:Agent = LLM + Tool
长谷深风1111 个月前
大数据·人工智能·ai agent·智能体·大模型应用·ai工程·agent终止条件
从 Plan 到 DAG:如何判断依赖、环与并行任务假设你让一个 AI 完成这样一件事:分析一家公司的竞争格局,写出报告,并根据结论生成一份演示文稿。AI 很快给出一个 Plan:搜集资料、整理竞争对手、分析市场、撰写报告、制作 PPT。看起来条理清楚,但真正执行时问题才出现:哪些步骤必须等前一步完成?哪些可以同时进行?如果两个任务互相等待怎么办?AI 生成的执行图,又怎么判断它真的能跑?
云边有个稻草人1 个月前
工业互联网·大模型应用·智能运维·时序大模型·timechoai·时序数据分析
从数据到洞察:时序大模型 TimechoAI 的使用方法与时序分析能力在工业互联网、物联网、能源管理、金融监测和智能运维等场景中,设备与业务系统会持续产生大量带有时间戳的数据。例如,工厂设备的温度、振动和转速,电力系统的电压与负荷,服务器的 CPU 使用率与响应时间,以及业务平台的订单量与用户活跃度,都属于典型的时序数据。
鱼日先生1 个月前
人工智能·工作流·dify·ai agent·大模型应用·ai 训练
Dify 企业级实验(04):性能优化实战——长流程从 60 秒到秒回有哪些手段?Dify 实验系列 · 企业级 04/12 | 实验编号:DIFY-104-04 基于 Dify 1.16.1 实测(2026-08)
鱼日先生1 个月前
工作流·dify·ai agent·大模型应用·ai 训练
Dify 中级实验(17):调试监控与性能优化——响应慢和 Token 超支如何定位?Dify 实验系列 · 中级 17/20 | 实验编号:DIFY-102-18 基于 Dify 1.16.1 实测(2026-08)
鱼日先生1 个月前
人工智能·工作流·dify·ai agent·大模型应用·ai 训练
Dify 企业级实验(03):事件驱动流水线——Webhook 与定时触发如何组成异步处理链?Dify 实验系列 · 企业级 03/12 | 实验编号:DIFY-104-03掌握事件驱动的异步处理:Webhook 接收外部事件 → 触发工作流 → 异步处理 → 结果通知。区别于「请求-响应」同步模式,这是生产系统集成的高频形态:外部系统事件进来,Dify 后台处理完再通知结果,接收方秒回、处理方异步跑。
鱼日先生1 个月前
人工智能·测试用例·工作流·dify·ai agent·大模型应用·ai 训练
Dify 高级实验(09):测试用例生成——如何让 AI 自动产出测试用例?Dify 实验系列 · 高级 09/10 | 实验编号:DIFY-103-09掌握「Agent 编排 + 结构化输出」的生成式工作流范式:让 LLM 扮演 QA 工程师,从一段功能描述自动产出可直接执行的测试用例(CSV 格式)。核心是三层结构化输出链路:
鱼日先生1 个月前
企业微信·dify·ai agent·大模型应用·hermes agent
办公聊天软件接入 Hermes Agent 实录(一):企业微信 WebSocket 长连接 + Dify 知识库问答基于 Hermes Agent(v0.20.0)+ Dify(1.16.1)实测。文中所有命令、日志片段、性能数据均来自真实运行,未做美化。
段一凡-华北理工大学1 个月前
开发语言·人工智能·算法·大模型应用·工艺参数优化·在线调优
AI推动工业智能化转型~系列文章19:工艺参数寻优:离线优化与在线调优的算法谱系预测模型回答"未来会怎样",操作优化的终极问题是"参数设多少最好"。工业寻优的特殊性在于:不能拿真实装置做穷举实验——每一次参数试验都有成本与风险。本期系统讲解从试验设计到贝叶斯优化的工业寻优算法谱系。