從HDFS部署Samza工作

如果要將Samza作業(yè)的.tar.gz包發(fā)布到HDFS，本教程將使用hello-samza來說明如何運行Samza作業(yè)。

上傳包

hadoop fs -put ./target/hello-samza-0.12.0-dist.tar.gz /path/for/tgz

添加HDFS配置

將集群的 hdfs-site.xml 文件放入 ?/ .samza / conf 目錄（與紗線-site.xml相同的位置）。如果設置了 HADOOP_CONF_DIR，如果 hdfs-site.xml 不存在，那么將 hdfs-site.xml 放在配置目錄中。

更改屬性文件

將屬性文件中的 yarn.package.path 更改為 HDFS 位置。

yarn.package.path=hdfs://<hdfs name node ip>:<hdfs name node port>/path/to/tgz

那么你應該能夠按照 hello-samza的 描述運行Samza的工作。