sqoop import抽取数据到hdfs乱码问题

sqoop import抽取数据到hdfs乱码问题

查源表数据:

查询目标表数据:

排查过程:

1.通过sqoop eval查询数据正常Sqoop_query "select car_owner ,replace(car_owner,'|','') as car_owner0 from tpkhrew.rew_policy limit 2"-----------------------------------------------| car_owner | car_owner0 |-----------------------------------------------| B44ED76EE02EF56511A35A0431CAB867 | B44ED76EE02EF56511A35A0431CAB867 || 3909889A8B265DC98ACC98C3A1930A1F | 3909889A8B265DC98ACC98C3A1930A1F |-----------------------------------------------

2.落hdfs数据异常,

3.查源表该字段数据类型,发现是对text类型字段做了replace操作会导致乱码
appli_name text COLLATE utf8mb4_bin COMMENT '投保人名称',

相关推荐
飞扬rdh14 小时前
npm插件的开发详细流程
npm
xw-busy-code14 小时前
npm 包管理笔记整理
前端·笔记·npm
吴声子夜歌18 小时前
Node.js——npm包管理器
前端·npm·node.js
xw-busy-code2 天前
npm私服搭建学习笔记
笔记·学习·npm·npm 私服
自学AI的鲨鱼儿2 天前
mac npm 安装 codex 报错 npm ENOTEMPTY
macos·npm·codex
tumeng07113 天前
HDFS的架构优势与基本操作
hadoop·hdfs·架构
FreeBuf_3 天前
新型开源供应链攻击:虚假 npm 安装日志暗藏 RAT 木马
前端·npm·开源
sunxunyong4 天前
HDFS nnsdy重新配置启动
大数据·hadoop·hdfs
Jianghong Jian4 天前
HDFS常用的JAVA API
大数据·hadoop·hdfs
Z_Wonderful4 天前
npm -v无效PowerShell 的执行策略,解决方案
前端·npm·node.js