sqoop import抽取数据到hdfs乱码问题

sqoop import抽取数据到hdfs乱码问题

查源表数据:

查询目标表数据:

排查过程:

1.通过sqoop eval查询数据正常Sqoop_query "select car_owner ,replace(car_owner,'|','') as car_owner0 from tpkhrew.rew_policy limit 2"-----------------------------------------------| car_owner | car_owner0 |-----------------------------------------------| B44ED76EE02EF56511A35A0431CAB867 | B44ED76EE02EF56511A35A0431CAB867 || 3909889A8B265DC98ACC98C3A1930A1F | 3909889A8B265DC98ACC98C3A1930A1F |-----------------------------------------------

2.落hdfs数据异常,

3.查源表该字段数据类型,发现是对text类型字段做了replace操作会导致乱码
appli_name text COLLATE utf8mb4_bin COMMENT '投保人名称',

相关推荐
longxibo20 小时前
【Ubuntu datasophon1.2.1 二开之三:解决HDFS安装后,启动失败:sudo: unknown user hdfs】
linux·ubuntu·hdfs
Lovely Ruby1 天前
[前端] 封装一下 echart 6,发布到 npm
前端·npm·node.js
BD_Marathon1 天前
NPM_常见命令
前端·npm·node.js
雪域迷影1 天前
怎么将.ts文件转换成.js文件?
javascript·typescript·npm·tsc
安_1 天前
为什么 Vue 要用 npm run dev 启动
前端·vue.js·npm
暴富的Tdy2 天前
【脚手架创建 Vue3 公共组件库】
前端·npm·npm发布
BD_Marathon2 天前
【JavaWeb】NPM_简介和相关配置
前端·npm·node.js
BD_Marathon2 天前
NPM_配置的补充说明
前端·npm·node.js
soul g3 天前
npm 包发布流程
前端·npm·node.js
Y‍waiX‍‍‮‪‎⁠‌‫‎‌‫‬3 天前
【npm】从零到一基于Vite+vue3制作自己的Vue3项目基础的npm包并发布npm
前端·npm·node.js