Sqoop1 import --as-parquet timestamp变为long

RUTHDEMON 2016-08-24 05:08:54
Sqoop1 (1.4.6版本),在导出数据时timestamp变成了long类型,如下为导入后metadata中看到的数据:

数据库原始状态如下所示:

,如何能保证Sqoop导出的数据的格式一致?
...全文
232 1 打赏 收藏 转发到动态 举报
写回复
用AI写文章
1 条回复
切换为时间正序
请发表友善的回复…
发表回复
弹指神通 2016-08-25
  • 打赏
  • 举报
回复
1、加一个选项指定mapper在读的时候的类型 --map-column-java RNDCRTTM=java.sql.Timestamp 2、你可以直接先把整个表的数据原样抽过来,这时候所有字段都是STRING,然后你自己再做相应的转换。

20,807

社区成员

发帖
与我相关
我的任务
社区描述
Hadoop生态大数据交流社区,致力于有Hadoop,hive,Spark,Hbase,Flink,ClickHouse,Kafka,数据仓库,大数据集群运维技术分享和交流等。致力于收集优质的博客
社区管理员
  • 分布式计算/Hadoop社区
  • 涤生大数据
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告
暂无公告

试试用AI创作助手写篇文章吧