sqoop import抽取数据到hdfs乱码问题

sqoop import抽取数据到hdfs乱码问题

查源表数据:

查询目标表数据:

排查过程:

1.通过sqoop eval查询数据正常Sqoop_query "select car_owner ,replace(car_owner,'|','') as car_owner0 from tpkhrew.rew_policy limit 2"-----------------------------------------------| car_owner | car_owner0 |-----------------------------------------------| B44ED76EE02EF56511A35A0431CAB867 | B44ED76EE02EF56511A35A0431CAB867 || 3909889A8B265DC98ACC98C3A1930A1F | 3909889A8B265DC98ACC98C3A1930A1F |-----------------------------------------------

2.落hdfs数据异常,

3.查源表该字段数据类型,发现是对text类型字段做了replace操作会导致乱码
appli_name text COLLATE utf8mb4_bin COMMENT '投保人名称',

相关推荐
行星00819 小时前
mac 通过homebrew 安装和使用nvm
macos·npm·node.js
dessler1 天前
Hadoop HDFS-部署和基本操作
linux·运维·hdfs
xrkhy2 天前
nvm安装详细教程(卸载旧的nodejs,安装nvm、node、npm、cnpm、yarn及环境变量配置)
前端·npm·node.js
领创工作室2 天前
npm介绍,指令合集,换源指令
前端·npm·node.js
小妖6663 天前
npm run 命令传递参数
前端·npm·node.js
Hilaku3 天前
深入理解npm、pnpm和yarn的lock文件,我发现了一些细节
前端·javascript·npm
mon_star°4 天前
有趣的 npm 库 · json-server
前端·npm·json
yourkin6668 天前
npm run 常见脚本
前端·npm·node.js
我不是李.杨9 天前
解决 npm i node-sass@4.12.0 安装失败异常 npm i node-sass异常解决
rust·npm·sass
程序员小羊!9 天前
Hadoop HDFS 3.3.4 讲解~
大数据·hadoop·hdfs