mysql - 使用sqoop将oracle数据导入hbase时,如何用隐藏列rownum作为--split-by?
迷茫
迷茫 2017-04-17 15:08:23
0
0
562

如题,将oracle中的数据导入hbase,用rownum进行并行导入,最终只能导入一个map的数据,为什么?
/usr/hdp/2.3.2.0-2950/sqoop/bin/sqoop import --connect "jdbc:oracle:thin:@" --username --password \
--query "SELECT * FROM tablename where $CONDITIONS" \
--hbase-table testoracle --hbase-row-key SEQID --split-by ROWNUM -m 8 --column-family cf

表中共有800w+数据,如果用seqid作为分割,就能全部导入,如果用rownum分割就只能导入100w条。

迷茫
迷茫

业精于勤,荒于嬉;行成于思,毁于随。

reply all(0)
Latest Downloads
More>
Web Effects
Website Source Code
Website Materials
Front End Template
About us Disclaimer Sitemap
php.cn:Public welfare online PHP training,Help PHP learners grow quickly!