【Azure Stream Analytic】用 JavaScript UDF 解决 JSON 字段被转成 Record 的关键点

问题描述

Azure Stream Analytics(ASA)将数据输出到下游并转换为CSV时,某些 JSON 字段(如 message)被自动转换成 Record 类型,导致原本期望的 JSON 字符串无法正常展示或被下游系统解析。

问题解答

出现该问题的主要原因是:ASA 在处理 JSON 对象时,如果输入字段是 JSON 对象(object 类型)而非 JSON 字符串,会在输出为 CSV 时默认序列化成 Record。

解答疑惑:为什么 JSON 字段会变成 Record

  • ASA 对输入字段进行类型推断:
    • 字符串 → 正常写入 CSV
    • 对象(Object) → 默认序列化为 Record
  • 当上游消息从"JSON 字符串"变成"JSON 对象"时,ASA 识别到的是结构化对象,因此在输出到 CSV 时自动以 Record 的方式呈现。
  • 因此需主动将 JSON 对象转换为字符串,最简方式是使用 JavaScript UDF。

解决步骤

第一步:创建 JavaScript UDF

  • 打开 ASA Job → 点击 Functions(函数)
  • 选择 Add Function → JavaScript UDF
  • 填写函数名称(如 jsonstringify)
  • 在编辑器中填写 JavaScript 代码
复制代码
function main(x) {
    return JSON.stringify(x);
}
  • 保存函数

第二步:在 ASA 查询中调用 UDF

在 ASA 查询内,对目标字段使用 UDF,例如:

复制代码
SELECT
UDF.jsonstringify(input.message) AS message,
*
INTO output

保存查询并启动作业后,JSON 对象将被转换成字符串并成功写入 CSV。

参考资料

JavaScript user-defined functions in Azure Stream Analytics : https://learn.microsoft.com/en-us/azure/stream-analytics/stream-analytics-javascript-user-defined-functions#other-javascript-user-defined-function-patterns


当在复杂的环境中面临问题,格物之道需:浊而静之徐清,安以动之徐生。 云中,恰是如此!

相关推荐
inksci11 小时前
用飞帆做了个小网页
前端·javascript·css·html
zhensherlock11 小时前
Protocol Launcher 系列:CodeHub 移动端 GitHub 协作利器
前端·javascript·typescript·node.js·自动化·github·js
多加点辣也没关系14 小时前
JavaScript|第40章:JavaScript 工程化实践
开发语言·javascript·ecmascript
彩虹暴龙兽16 小时前
JavaScript 预编译机制与执行上下文构建分析
javascript
tryCbest16 小时前
Vue3——第 22 篇:Pinia——新一代状态管理(上)
前端·javascript·vue.js
bai27317 小时前
"👨‍👩‍👧‍👦" 的 length 是 11:我把自己写的字数统计脚本拖出来审了一遍
前端·javascript
bai27317 小时前
同一个 1.005,toFixed 给 1.00、Math.round 给 1、Intl 给 1.01:999 个三分位小数的实测
javascript·后端
爱编程的1717 小时前
一篇讲透 JS 对象:数据类型、原型链与包装类
javascript
鲸渔18 小时前
【AI Agent系列课程13-Python 基础13】JSON 读写:结构化数据交换基础
开发语言·python·json·ai编程
Highcharts.js1 天前
Highcharts漏斗图表使用配置指南
java·开发语言·javascript·信息可视化·highcharts·漏斗图