sqoop import抽取数据到hdfs乱码问题

sqoop import抽取数据到hdfs乱码问题

查源表数据:

查询目标表数据:

排查过程:

1.通过sqoop eval查询数据正常Sqoop_query "select car_owner ,replace(car_owner,'|','') as car_owner0 from tpkhrew.rew_policy limit 2"-----------------------------------------------| car_owner | car_owner0 |-----------------------------------------------| B44ED76EE02EF56511A35A0431CAB867 | B44ED76EE02EF56511A35A0431CAB867 || 3909889A8B265DC98ACC98C3A1930A1F | 3909889A8B265DC98ACC98C3A1930A1F |-----------------------------------------------

2.落hdfs数据异常,

3.查源表该字段数据类型,发现是对text类型字段做了replace操作会导致乱码
appli_name text COLLATE utf8mb4_bin COMMENT '投保人名称',

相关推荐
fruge1 天前
钉钉机器人消息发送 npm 库:ddmessage-fruge365
机器人·npm·钉钉
艾小码1 天前
只会npm install?这5个隐藏技巧让你效率翻倍!
前端·npm·node.js
dessler1 天前
Hadoop HDFS-JournalNode(jn)详细介绍
linux·运维·hdfs
dessler2 天前
Hadoop HDFS-SecondaryNameNode(2nn)详细介绍
大数据·hadoop·hdfs
缘来小哥3 天前
一文理解npm/yarn/pnpm中的版本通配符
npm·node.js
FreeBuf_3 天前
npm供应链攻击威胁开发环境安全
前端·安全·npm
longze_73 天前
开源npm引导guide组件
前端·javascript·npm·开源·开源软件·guide·引导组件
longze_73 天前
npm 打包上传命令,撤销错误版本
前端·npm·node.js
扯淡的闲人3 天前
关于NPM(Node Package Manager)的详细介绍
前端·npm·node.js
再学一点就睡4 天前
从 npm 到 pnpm:包管理器的进化与 pnpm 核心原理解析
前端·npm