sqoop import抽取数据到hdfs乱码问题

sqoop import抽取数据到hdfs乱码问题

查源表数据:

查询目标表数据:

排查过程:

1.通过sqoop eval查询数据正常Sqoop_query "select car_owner ,replace(car_owner,'|','') as car_owner0 from tpkhrew.rew_policy limit 2"-----------------------------------------------| car_owner | car_owner0 |-----------------------------------------------| B44ED76EE02EF56511A35A0431CAB867 | B44ED76EE02EF56511A35A0431CAB867 || 3909889A8B265DC98ACC98C3A1930A1F | 3909889A8B265DC98ACC98C3A1930A1F |-----------------------------------------------

2.落hdfs数据异常,

3.查源表该字段数据类型,发现是对text类型字段做了replace操作会导致乱码
appli_name text COLLATE utf8mb4_bin COMMENT '投保人名称',

相关推荐
N***73856 小时前
后端数据一致性
hdfs·pandas·sstable
诸葛韩信8 小时前
前端工程化1——npm insatall背后的工作原理
前端·npm·node.js
这是个栗子14 小时前
npm报错 : 无法加载文件 npm.ps1,因为在此系统上禁止运行脚本
前端·npm·node.js
g***969016 小时前
Node.js npm 安装过程中 EBUSY 错误的分析与解决方案
前端·npm·node.js
f***a34619 小时前
node.js+npm的环境配置以及添加镜像(保姆级教程)
arcgis·npm·node.js
一直在学习的小白~2 天前
npm发布脚手架流程
前端·npm·node.js
万万君2 天前
npm quick start for beginner
前端·npm·node.js
lpfasd1234 天前
Windows下使用nvm-windows管理Node.js版本及npm配置全指南
windows·npm·node.js
顧棟4 天前
HDFS元数据与auditlog结合Hive元数据统计分析
hive·hadoop·hdfs
jenchoi4136 天前
【2025-11-22】软件供应链安全日报:最新漏洞预警与投毒预警情报汇总
网络·安全·web安全·网络安全·npm