在cloudera上提交hadoop工作

Question

我想知道我们是否可以在Amazon上设置cloudera集群并从我的本地linux启动一项hadoop作业，而无需ssh进入Amazon的节点。

是否有类似客户这样的沟通方式？

Answer 1

以下教程中的技巧确实有用。 从冷铁到生产，您应该能够在20分钟之内放置一个可用的Hadoop集群，只需遵循他的指导即可：

• Hadoop快速入门：20分钟内在云中构建集群

真的值得检查。

Answer 2

您可以在本地Linux中安装Hadoop客户端，并在自己的jar中使用“ hadoop jar”命令。 在命令行中指定选项mapred.job.tracker，客户端会将您的jar推送到jobtracker并将其复制到将用于此作业的所有tasktracker中。