amazon emr pig:使用参数文件

nxowjjhe  于 2021-06-21  发布在  Pig
关注(0)|答案(1)|浏览(310)

是否可以将参数文件传递到amazon上的pig作业?pig命令行支持这一点,但我不知道amazon是否也支持这一点。其主要思想是,我不需要通过命令行向amazon发送大量的参数,只需上传文件并使用参数文件中的所有值即可。
所以参数文件应该是这样的:param\u name=param\u value。
pig-f script.pig-param\u file parameters.log可以工作,但现在我只需要找到亚马逊的替代品:)
提前谢谢。

vptzau2j

vptzau2j1#

解决了。
要使用参数文件,请在amazon上如下运行:

--args "-param_file,s3://<LOCATION_PARAM_FILE>"

相关问题