Giraph源码分析（七）——添加消息统计功能作者|白松1、添加类，把每个超步发送的消息量大小写入Hadoop的Counter中。在org.apache.giraph.counters包下新建GiraphMessages类，来统计消息量。源代码如下：packageorg.apache.giraph.counters;importjava.util.Iterator;importjava.util.
分类：
其他好文 时间：
2019-08-19 17:13:06
阅读次数：
76
HamaWhite 原创，转载请注明出处。欢迎大家增加Giraph 技术交流群： 228591158 欢迎訪问： 西北工业大学 - 大数据与知识管理研究室 （Northwestern Polytechnical University - BigData and Knowledge Managemen ...
分类：
其他好文 时间：
2018-01-13 20:58:25
阅读次数：
191
HamaWhite 原创。转载请注明出处！欢迎大家增加Giraph 技术交流群： 228591158 Giraph中Aggregator的基本使用方法请參考官方文档：http://giraph.apache.org/aggregators.html 。本文重点在解析Giraph怎样实现Aggrega ...
分类：
其他好文 时间：
2017-08-16 21:51:06
阅读次数：
193
一、Spark框架预览 主要有Core、GraphX、MLlib、Spark Streaming、Spark SQL等几部分。 GraphX是进行图计算与图挖掘，其中主流的图计算框架现在有：Pregal、HAMA、Giraph（这几部分采用超步即同步的方式），而GraphLab与Spark Grap
分类：
其他好文 时间：
2016-03-04 09:17:57
阅读次数：
391
概要 这是一个Giraph的入门教程，主要用来运行少量输入的Giraph程序，并不能用于生产环境。 在这个教程中，我们将会在一个物理机器行部署一个单节点，伪分布的Hadoop集群。这个节点既是master，又是slave。那即是，它将会运行NameNode,SecondaryNameNode,Job
分类：
其他好文 时间：
2016-02-26 15:28:11
阅读次数：
2421
Apache Giraph
http://blog.cloudera.com/blog/2014/02/how-to-write-and-run-giraph-jobs-on-hadoop/
http://blog.cloudera.com/blog/2014/05/how-to-manage-time-dependent-multilayer-networks-in-apache-hadoo...
分类：
其他好文 时间：
2015-01-16 13:09:18
阅读次数：
813
/* 版权声明：可以任意转载，转载时请务必标明文章原始出处和作者信息 .*/ author: 张俊林 节选自《大数据日知录：架构与算法》十四章，书籍目录在此 对于离线挖掘类图计算而言，目前已经涌现出众多各方面表现优秀而各具特点的实际系统，典型的比如Pregel、Giraph、Hama、PowerG...
分类：
数据库 时间：
2014-10-09 02:20:18
阅读次数：
267
本文目的：讲解并行Finding a Maximal Independent Set（寻找最大独立集问题）算法，以及在Hama平台上如何实现该算法。该算法可方便移植到所有的Pregel-Like系统中，如Giraph、GPS (Graph Processing System)。
前言：关于Maximal Independent Set（MIS）的基础知识参考我的博客《找最大独立集问题-Finding a Maximal Independent Set》。
1. 本算法参考 Luby's classic pa...
分类：
其他好文 时间：
2014-06-22 14:26:16
阅读次数：
265
Java开发FTP功能的apache工具包，小心为妙...
分类：
编程语言 时间：
2014-05-26 04:10:01
阅读次数：
428
