teradata快速导出(或tpt)与sqoop导出

rqdpfwrv  于 2021-05-29  发布在  Hadoop
关注(0)|答案(1)|浏览(956)

编辑:需要确定哪一个更适合从teradata导出大量数据—sqoop、tpt或fexp
op:我已经知道teradata的fast export和tpt不能直接将数据导出到hadoop。我可以将数据带到本地环境并将其并行地移动到hadoop。
我想知道哪个工具以最有效的方式从teradata中提取数据。
我必须提取数据量巨大的数据集(大约250亿条记录~15tb大小)。当然teradata中的数据是分区良好的,我将基于分区和惟一pi来分割提取策略。
我找不到足够的内容来直接比较teradata实用程序和sqoop。
哪个工具对teradata环境中当前运行的作业影响最小,并以最优化的方式提取数据。

s8vozzvw

s8vozzvw1#

当然teradata的fastexport不能直接导出到hadoop,它是一个旧的遗留工具,不再增强。
任何新的开发都应该使用tpt,例如。
使用dataconnector操作符在hadoop中编写文件和表
通用数据移动作业

相关问题