本文旨在介绍通过两台物理节点,实现完全分布式hadoop程序的安装部署。
分类:
其他好文 时间:
2014-06-10 10:13:49
阅读次数:
313
Munin的安装和配置可以参考第一篇文章:[Linux实用工具]Linux监控工具munin的安装和配置http://www.cnblogs.com/rond/p/3757804.htmlMunin的结果是用html展示的。所以展示结果非常简单,只需要部署一个web服务器就可以了。但是如果你需要细看...
分类:
系统相关 时间:
2014-06-09 19:37:55
阅读次数:
303
Map-reduce是一种优雅的数据处理方式,本文通过三个例子介绍如何用python在linux的管道进行map-reduce编程,本文写的所有map-reduce程序都可以原封不动的放在Hadoop下运行,很容易在大数据集上扩展。
分类:
其他好文 时间:
2014-06-09 19:11:44
阅读次数:
253
Hadoop 的优势Hadoop 是 一 个 能 够 让 用 户 轻 松 架 构 和 使 用 的 分
布 式 计 算 平 台。 用 户 可 以 轻 松 地 在Hadoop 上开发执行处理海量数据的应用程序。它主要有下面几个长处:1.高可靠性。Hadoop
按位存储和处理数据的能力值得人们信赖。2.高...
分类:
其他好文 时间:
2014-06-09 15:48:27
阅读次数:
201
https://github.com/ihrwein/webhdfshttps://tiborbenke.blogs.balabit.com/2013/11/the-syslog-ng-in-the-hadoop-era/https://github.com/prezi/logboxhttp://d...
分类:
Web程序 时间:
2014-06-09 14:54:45
阅读次数:
198
see
also:http://www.cnblogs.com/upDOoGIS/archive/2010/11/19/1881970.html CPU
Processor : % Processor Time 当前所有进程的处理器时间[即CPU使用率],如果该值持续超过95%,CPU是瓶颈。% P...
百亿数量级的大数据项目,软硬件总体预算只有30万左右,需求是进行复杂分析查询,性能要求多数分析请求达到秒级响应。
遇到这样的项目需求,预算不多的情况,似乎只能考虑基于Hadoop来实施。
理论上Hadoop撑住百亿数量级没问题,但想要秒级响应各种查询分析就不行了。我们先大概分析一下Hadoop的优缺...
分类:
其他好文 时间:
2014-06-09 14:32:39
阅读次数:
509
当前的监控项目或多或少都会涉及到外网的访问, 就目前遇到的解决方案大致有如下几种:1.
固定IPDVR/NVR有固定的IP, 这种没什么难度, 直接访问就行了, 缺点是成本很高.2. 域名解析 像海康就有自己的域名解析服务器,
其他的也可以用花生壳之类的, 不过免费的花生壳不是很稳定. 确定是需要....
分类:
其他好文 时间:
2014-06-09 13:38:49
阅读次数:
296
今天把时钟系统的最后部分,时钟安全系统(CSS)和时钟输出功能(CCO),做一个简答的说明。1.时钟安全系统(以下简称CSS)CSS功能很简单,就是监控HSE是否实效(如果系统使用HSE作为主时钟源),而自动切换到HSI/8作为主时钟源,从而避免系统停止运行。如果使能CSSIEN,当主时钟失效,切换...
分类:
其他好文 时间:
2014-06-09 00:30:03
阅读次数:
210