hadoop - 如何通过 Sqoop 作业通过 Hive conf

Question

如何通过 Sqoop 导入作业传递 hive conf 参数。

SET hive.tez.container.size=4096 

我每次都使用来自 hive cli 的这个 hive conf。

Answer 1

<command>[SQOOP-COMMAND]</command>
<arg>[SQOOP-ARGUMENT]</arg>
<file>lib/hive-site.xml</file>

Answer 2

在 sqoop 命令行中使用-D hive.tez.container.size=4096选项（可以添加许多 -D 选项）：

sqoop import -Dhive.tez.container.size=4096 -Dsomething_else -Dmapreduce.map.java.opts=-Xmx4096m ... other parameters