问题与使用Cloudera的连接器为Teradata与Sqoop

Question

我们正在开发用于移动蜂房表，Teradata的解决方案，我们正在使用MAPR-sqoop1.4.2与Cloudera的连接器为Teradata 1.0.5。 Mapr版本是M5。 但是，由于某些表在15-20分钟内从Hadoop导出到Teradata，而其他表需要3-4小时，因此性能会发生波动。 该号码。的记录和文件大小是相同的所有表，因为是没有。用作Teradata中主索引的列的唯一值。 （没有歪斜）。

由客户提出的问题是，是否Cloudera的连接器1.0.5实际上使用FASTLOAD与否。已转移的数据在DBQL表（Teradata）中显示为 插入语句，似乎并未使用FASTLOAD。

那么我怎么能确定出口实际上是使用FASTLOAD？

Answer 1

Cloudera连接器是“Teradata Hadoop连接器”的包装。尝试使用直接Teradata的连接器性能进行比较：

http://developer.teradata.com/connectivity/articles/teradata-connector-for-hadoop-now-available

您的Teradata数据库管理员应该能够从Teradata的观点工具的历史告诉你导出过程中是否被使用FastLoad。