sqoop import抽取数据到hdfs乱码问题

sqoop import抽取数据到hdfs乱码问题

查源表数据:

查询目标表数据:

排查过程:

1.通过sqoop eval查询数据正常Sqoop_query "select car_owner ,replace(car_owner,'|','') as car_owner0 from tpkhrew.rew_policy limit 2"-----------------------------------------------| car_owner | car_owner0 |-----------------------------------------------| B44ED76EE02EF56511A35A0431CAB867 | B44ED76EE02EF56511A35A0431CAB867 || 3909889A8B265DC98ACC98C3A1930A1F | 3909889A8B265DC98ACC98C3A1930A1F |-----------------------------------------------

2.落hdfs数据异常,

3.查源表该字段数据类型,发现是对text类型字段做了replace操作会导致乱码
appli_name text COLLATE utf8mb4_bin COMMENT '投保人名称',

相关推荐
whale fall11 小时前
npm install安装不成功(node:32388)怎么解决?
前端·npm·node.js
viperrrrrrrrrr714 小时前
大数据(1)-hdfs&hbase
大数据·hdfs·hbase
王小王-12316 小时前
基于Hadoop的餐饮大数据分析系统的设计与实现
hive·hadoop·flask·sqoop·pyecharts·hadoop餐饮大数据分析·hadoop美食数据分析
Gazer_S16 小时前
【公司环境下发布个人NPM包完整教程】
前端·npm·node.js
溪i16 小时前
pnpm 升级
npm
你喜欢喝可乐吗?16 小时前
Windows 安装 nodejs npm
前端·npm·node.js
come1123417 小时前
npm 命令入门指南(前端小白版)
前端·npm·node.js
墨菲安全17 小时前
NPM组件 alan-baileys 等窃取主机敏感信息
前端·npm·node.js·npm组件·恶意包·主机信息窃取
我在北京coding17 小时前
npm ERR! code ERESOLVE npm ERR! ERESOLVE unable to resolve dependency tree
前端·npm·node.js
whale fall17 小时前
npm代理设置 + npm配置镜像源
前端·npm·node.js