技术栈
eval
Joy T
14 天前
人工智能
·
trace
·
eval
·
回归测试
Agent 上线前怎么评测:从完成标准、离线测试集到 Trace 回归
Agent 做到什么程度,才可以上线?如果只是手工问几个问题,看它能不能回答出来,很难说明它已经可靠。真实环境中的 Agent 还要面对知识检索、工具调用、权限控制、异常输入和历史 Bad Case,因此上线前需要一套能够重复执行、量化判断和持续回归的评测体系。
Java后端的Ai之路
25 天前
开发语言
·
python
·
探索
·
eval
·
内置函数
Python进阶探索29_eval内置函数
在 Python 的世界里,有一个函数既让人爱不释手,又让人闻之色变。它就是 eval()。爱它的人说它是"动态执行的瑞士军刀",一行代码就能把字符串变成可运行的表达式;怕它的人说它是"安全漏洞的代名词",稍有不慎就会让攻击者在你的服务器上为所欲为。
ryan_996
2 个月前
agent
·
trace
·
eval
·
召回率
·
大模型评测
·
evaluation
一次讲清大模型应用评测:从 Recall@k、LLM Judge 到 Agent 上线门禁
**文章摘要:**大模型应用不能只靠“感觉回答不错”来验收。本文从真实业务目标出发,系统讲清模型、RAG、意图识别、工具调用与 Agent 应该评什么,解释 Recall@k、MRR、nDCG、Macro-F1、FPR/FNR、pass@k 与 pass^k,并给出三类 Grader、评测数据集、Trace、LLM Judge 校准、发布门禁和线上闭环的完整落地方法。
rockey627
2 个月前
c#
·
.net
·
script
·
eval
·
动态脚本
C#脚本引擎之AScript与Flee对比
AScript是一个开源的C#动态脚本解析执行引擎,支持自定义语法,支持扩展多种脚本语言(目前已支持C#/Python3/SQL/JavaScript/Lua五种语言),支持解释执行和编译执行两种执行模式,并且支持编译缓存,以适配不同场景下对性能的要求。
nix.gnehc
3 个月前
人工智能
·
eval
·
评测
工具选型:5 个工具对比
② 评测全景列出了 5 个工具。本节不是直接讲某一个工具,而是从选型维度出发,帮你根据自己的场景做选择。
nix.gnehc
3 个月前
人工智能
·
eval
·
评测
评测工程化:从手动到持续
③ 评测思维框架的决策树到"评测方案确定"就停了:方案确定后,还有四步工程化工作:判分实现(规则校验/LLM-as-judge/两层配方)已在④ 评测实践中展开,本文不重复。本文聚焦"怎么持续跑"。
nix.gnehc
3 个月前
人工智能
·
eval
·
评测
评测认知基座
本文是「智能体评测系统认知」系列第 ① 篇。系列导航:传统软件测试建立在一个前提上:相同的输入产生相同的输出。
cuso4win
4 个月前
笔记
·
python
·
agent
·
eval
Agent 项目里的 Eval 到底是什么?怎么分类?不同项目应该怎么评测?
最近看了几类资料:牛客里讲的 Agentic RAG 评测体系、OLMO eval 里讲的模型研发评测框架,以及 SWE-bench、Terminal-Bench、AgentBench、Ragas、DeepEval、τ-bench 等评测思路。它们都叫 eval,但其实不是一个层级的东西。
rockey627
5 个月前
c#
·
.net
·
script
·
eval
·
expression
·
异步执行
·
动态脚本
AScript异步执行与await关键字
AScript是一个开源的C#动态脚本解析执行引擎,从1.2.5版本开始支持异步解析执行以及新增 await 和 @@CancellationToken 关键字。
rockey627
5 个月前
sql
·
c#
·
.net
·
linq
·
script
·
eval
·
expression
AScript如何实现LINQ语法
AScript是一个开源的C#动态脚本解析执行引擎,支持扩展自定义语法,本篇将详细讲解如何扩展实现LINQ语法。
Joseph Cooper
5 个月前
人工智能
·
ai
·
agent
·
eval
·
harness
生产级 AI Agent 评估体系:从 12 指标框架到持续评估闭环
摘要:95% 的企业 AI pilot 失败,根因不是模型不行,而是没有评估体系。本文从 100+ 部署案例的 12 指标框架出发,手把手教你搭建生产级 Agent 评估闭环。
rockey627
5 个月前
c#
·
.net
·
script
·
eval
·
expression
·
动态脚本
AScript之匿名类型与动态类型
AScript是一个开源的C#动态脚本解析执行引擎,其中有两种数据类型比较特殊:匿名类型和动态类型。匿名类型是在编译时确定结构,适合固定数据结构,属性只读。
rockey627
6 个月前
c#
·
.net
·
script
·
eval
·
expression
·
动态脚本
AScript中一个很有意思的语法
AScript是一个开源的C#动态脚本解析执行引擎,支持解析执行和编译执行2种模式,其中有个语法很有意思,那就是static语法。
rockey627
6 个月前
python
·
c#
·
.net
·
script
·
python3
·
eval
·
expression
·
function
·
动态脚本
基于AScript的python3脚本语言发布啦!
AScript是一个开源的C#动态脚本解析执行引擎,支持扩展多种脚本语言,今天(2026年5月4日)正式发布了python3语言AScript.Lang.Python3的第1个版本0.0.1,快来试试吧!
rockey627
6 个月前
c#
·
.net
·
script
·
eval
·
expression
·
动态脚本
AScript之eval函数详解
AScript是一个开源的C#动态脚本解析执行库,内置的eval函数可动态执行字符串脚本,在python脚本中对应的是exec函数。
rockey627
6 个月前
c#
·
.net
·
script
·
eval
·
expression
·
function
·
动态脚本
AScript函数体系详解
脚本内定义函数,使得脚本配置更加灵活,不必依赖于硬编码增加函数。函数名为“_”下划线。函数名相同,参数个数或参数类型不同。
rockey627
7 个月前
sql
·
c#
·
.net
·
script
·
eval
·
function
·
动态脚本
AScript动态脚本多语言环境支持
AScript是一个开源的C#动态脚本解析执行库,支持扩展多种脚本语言。前一篇文章《AScript如何实现中文脚本引擎》中演示了扩展中文语言示例,本篇将更深入的理解AScript的多语言机制,以及如何在脚本中嵌入多种脚本语言。
rockey627
7 个月前
c#
·
.net
·
script
·
eval
·
expression
·
function
·
动态脚本
AScript如何实现中文脚本引擎
AScript是一个开源的C#动态脚本解析执行库,支持自定义语法解析,基于此,我们来实现一个中文脚本引擎示例。
mooyuan天天
1 年前
rce
·
eval
·
命令执行
·
ctfhub
CTFHub RCE通关笔记1:eval执行(两种方法渗透)
目录一、PHP eval1、基本语法2、重要特点(1)代码字符串的格式要求(2)作用域特性(3)错误处理方式
lq_ioi_pl
1 年前
rce
·
eval
EVAL长度限制突破方法
相似答案:linux下反引号可以执行命令?param=echo $_GET[0];&0=id那么就可以写一些内容到一些文件里去