在远程Hadoop集群上运行Hadoop测试

用户名

我已经从http://s3.amazonaws.com/public-repo-1.hortonworks.com/index.html#/HDP/centos6/2.x/updates/2.1.2.0中提取了hadoop源代码

当前,hadoop测试在同一jvm上启动一个小型单节点群集并执行测试。但是,我的目标是在已安装的远程hadoop集群上运行Junit测试。我想将单元测试保留为在集群外部运行的客户端。无法确定hadoop测试是否支持相同的测试。

用户名

这些测试旨在针对本地主机(而不是实际集群)运行它。Bigtop Apache就是为此而进行的。请参阅https://wiki.apache.org/hadoop/HowToDevelopUnitTests

本文收集自互联网,转载请注明来源。

如有侵权,请联系[email protected] 删除。

编辑于
0

我来说两句

0条评论
登录后参与评论

相关文章

来自分类Dev

在远程Hadoop集群上运行Hadoop测试

来自分类Dev

在hadoop集群上运行MRBenchmark的异常

来自分类Dev

Hadoop 集群上的 Wordcount 执行

来自分类Dev

删除远程hadoop集群中的克隆文件

来自分类Dev

hadoop集群上的gcloud计算权限不足

来自分类Dev

Hadoop集群上的Namenode和Jobtracker信息

来自分类Dev

Hadoop集群上的Kerberos身份验证

来自分类Dev

Windows上没有Hadoop集群的MRUnit

来自分类Dev

在Hadoop安装的集群上使用R

来自分类Dev

Hadoop集群上的Namenode和Jobtracker信息

来自分类Dev

Hadoop:如何正确停用集群上的节点?

来自分类Dev

在Hadoop 2上运行作业时无法初始化集群异常

来自分类Dev

HFTP与HTTP有何不同,以从远程hadoop集群读取数据?

来自分类Dev

远程运行Hadoop应用程序

来自分类Dev

h2o 连接到 hadoop 集群上的集群

来自分类Dev

试图在Windows上运行hadoop

来自分类Dev

在Mac OS上运行的Hadoop

来自分类Dev

在Hadoop上运行Java程序

来自分类Dev

hadoop集群测试的最低要求是什么

来自分类Dev

Hadoop集群无法启动

来自分类Dev

什么是Hadoop集群?

来自分类Dev

Hadoop 集群的类型

来自分类Dev

Hadoop,Hive->获取针对集群运行的SQL列表

来自分类Dev

Hive 和 HBase 是否需要运行 Hadoop 集群?

来自分类Dev

在运行hadoop集群时在Google Cloud Platform上获取“ sudo:未知用户:hadoop”和“ sudo:无法初始化策略插件错误”

来自分类Dev

将可执行的jar发送到hadoop集群并作为“ hadoop jar”运行

来自分类Dev

在 hadoop 单节点集群上添加 EBS 卷

来自分类Dev

WebHDFS无法在安全的hadoop群集上运行

来自分类Dev

无法在Windows 7上运行Hadoop