我正在使用基于 Giraph 的应用程序，该应用程序在 NUMA 系统中大量使用 memory。 它频繁地对 memory 进行读写操作，并且具有多个线程。 假设我安排 4 个工作人员的内核数量与每个芯片的内核数量一样多，这是否意味着他们将被固定到特定的 CPU，以便他们只能使用本地 NUMA m ...
我正在尝试通过 YARN 在 Hadoop 集群上运行基于 Giraph 的应用程序。 我使用的命令是 yarn jar solver-1.0-SNAPSHOT.jar edu.agh.iga.adi.giraph.IgaSolverTool 首先，我需要将该 JAR 复制到发出yarn clas ...
看来Giraph Stas仅使用map-reduce（使用-Phadoop2 mvn配置文件构建的giraph-1.3.0-snapshot）写入日志中。 是否也可以使用yarn激活日志中的Giraph Stats（使用-Phadoop_yarn mvn配置文件构建的giraph-1.3. ...
我正在使用由20个c3.8xlarge机器组成的ec2 hadoop集群，每个机器具有60 GB RAM和32个虚拟CPU。 我在每台机器上都设置了yarn和mapreduce设置，如下所示： https: //docs.aws.amazon.com/emr/latest/ReleaseGui ...
我正在使用带有纱线轮廓的giraph-1.3。 首先，我在ec2集群上配置了1个namenode和2个datanode。 我的应用程序正常运行，因为我在日志（和输出目录）中看到了预期的输出。 我使用“ -w 2”参数启动了giraph，因为我有两个datanode。 在datanod ...
在编译giraph时出现以下错误。 我在Java 1.8和Maven 3.3.9中使用ubuntu 16.04。 遵循mvn -version命令的详细信息： 我用以下命令克隆了 因此，我尝试遵循以下maven命令，但始终遇到相同的错误。 你能告诉我我的错误是什么吗？ ...
我是 Giraph 和 hadoop 的新手。我正在尝试使用 maven 编译 giraph 我尝试在命令提示符下使用命令mvn -Phadoop_2 -fae -DskipTests clean install但我收到错误。 我附上的图片来自 eclipse（我在 cmd 中也遇到了类似的错误。 ...
我已经用完整的Hadoop / Hbase生态系统配置了Apache Nutch 2.3.1。 我希望我的搜寻器应优先考虑每次迭代中种子中给出的那些域。 根据我的测试； 它可以沿任一方向完成，即从链接中选择所有网址，反之亦然。 可以说，我希望40％的选定URL应该来自出站链接（而不是种子 ...
因此，我已经通过此处显示的脚本在计算机上成功执行了SimpleShortestPathComputation： 现在的问题是，我正在尝试自己的工作。 它实际上是SimpleShortestPathComputation类的直接复制粘贴，只是更改了包名和类名。 尝试使用-libjars ...
我的用例是一个包含数亿个顶点的图（比如 100M 到 1B）。 每个顶点都有一组 10 个属性，这些属性基本上是基于顶点边的权重和相邻顶点的分数计算的分数。 在图中添加（或删除）节点时，可能需要重新计算所有顶点的分数。 这不需要实时完成，因此这绝对是一个 OLAP/批处理用例。 还有一些非常简单的图 ...
我是hadoop的新手。 我正在尝试将Giraph设置为在带有纱线的hadoop-2.6.5上运行。 当我提交Giraph作业时，该作业被成功提交但失败，并且在容器syslog中获得以下日志： 2018-01-30 12：09：01,190信息[主] org.apache. ...
我正在尝试使用脚本操作在具有hadoop的HDInsight群集上安装Giraph。 部署群集30分钟后，将显示错误。 部署失败 部署到资源组“图形”失败。 基础API的其他详细信息可能会有所帮助：至少一项资源部署操作失败。 请列出部署操作以获取详细信息。 有关用法的详 ...
我是Giraph和Hadoop Yarn的新手。 遵循Giraph的快速入门，使我从命令行从源代码运行jar构建示例作业。 我想从简单的Java程序运行作业。 这个问题是从以前类似的MapReduce工作问题中得到启发的。 寻找类似的答案与Java的依赖关系，这将是需要的。 我 ...
我是Hadoop / Giraph和Java的新手。 作为任务的一部分，我在其之上下载了Cloudera Quickstart VM和Giraph。 我使用的书名为“使用Apache Giraph进行实践图分析；作者：Shaposhnik，Roman，Martella，Claudio，Log ...
我是Hadoop / Giraph和Java的新手。 作为任务的一部分，我在其之上下载了Cloudera Quickstart VM和Giraph。 我使用的书名为“使用Apache Giraph进行实践图分析；作者：Shaposhnik，Roman，Martella，Claudio，Log ...
我需要处理一个图，该图的顶点值具有数组（双精度），而不是单个双精度。 因此，输入格式为vertex_Id（string）\\ t vertex_value（数组）\\ t neighbors。 查看文档，似乎没有支持这种格式的类。 我需要什么选项将这种格式的输入提供给Giraph？ ...
我正在尝试将一个giraph作业提交给hadoop 1.2.1集群。 群集具有名称节点主服务器，映射减少主服务器和四个从服务器。 作业失败，出现以下异常： java.util.concurrent.ExecutionException: java.lang.IllegalStateExc ...
我是Giraph和Hadoop的新手。 有什么方法可以计算图的顶点之间交换的本地消息和远程消息（通过网络传输）的数量？ ...
我想在RedHat群集上安装Apache Giraph 1.1.0 ，已经在群集上安装并配置了Hadoop 2.7.1 。 在官方教程http://giraph.apache.org/quick_start.html中 ，建议下载Giraph的源代码并使用Apache Maven编译Girap ...
我一直在尝试在具有Hadoop 2.7.3和Giraph 1.3.0的Ubuntu服务器上运行Apache Giraph作业。 我还尝试在具有较低版本Giraph（1.2 / 1.1）的Hadoop 2.6上运行相同的作业。 但是在两种情况下我都会收到以下错误。 有没有人遇到过类似的 ...