我有一个名为blacklist.xml的文件,这个文件的每一行都包含一个绝对路径,多个路径在这个文件中。此文件存储在/users//我是否可以从本地目录(/users//)加载这个文件,但不能从hdfs加载?谢谢!!
toiithl61#
您可以使用命令行选项在本地模式下运行pig -x local . pig一次只能处理一个文件系统——如果您希望使用hadoop示例,将临时数据和输出数据存储到hdfs,那么您的所有输入文件也需要在hdfs上。例外情况是,如果您使用本地文件作为参数集合,则应该查找如何从文件中读取参数。
-x local
1条答案
按热度按时间toiithl61#
您可以使用命令行选项在本地模式下运行pig
-x local
. pig一次只能处理一个文件系统——如果您希望使用hadoop示例,将临时数据和输出数据存储到hdfs,那么您的所有输入文件也需要在hdfs上。例外情况是,如果您使用本地文件作为参数集合,则应该查找如何从文件中读取参数。