Docker 是一个开源的应用容器引擎,让开发者可以打包他们的应用以及依赖包到一个可移植的容器中,然后发布到任何流行的 Linux 机器上,也可以实现虚拟化。Docker可以自动化打包和部署任何应用、创建一个轻量级私有PaaS云、搭建开发测试环境、部署可扩展的Web应用等;尽管虚拟化和云计算以及大规...
分类:
其他好文 时间:
2014-07-13 23:30:48
阅读次数:
360
主要翻译了链接1)的教程,加上一些个人研究,步骤如下:1) 在openshift.redhat.com申请账号,安装git for windows,然后安装gem install rhc,这些比较容易。2) 运行这个命令,就会生成一个py27的目录。 rhc-create-app -a py27 -...
分类:
编程语言 时间:
2014-07-13 21:48:24
阅读次数:
275
Google声称内部已经抛弃Map-reduce几年了,并在今年的Google IO大会高调发布Cloud Dataflow系统。本文介绍了在这个新框架下如何进行分布式计算,并与现有基于Hadoop的Twitter Summingbird以及Spark框架进行了对比。
分类:
其他好文 时间:
2014-07-13 20:29:26
阅读次数:
353
异常截图:原因很简单,Hadoop对应的eclipse插件jar包版本不对,更换至响应版本即可。
分类:
编程语言 时间:
2014-07-13 19:48:47
阅读次数:
323
引言 最近LZ带头在做一个互联网项目,互联网的东西总是那么新鲜,这也难怪大部分猿友都喜欢互联网。这个互联网项目不仅让LZ开发了一个HBase大数据应用,近期的一次需求讨论会上,又出来一个小需求,蛮有意思的。这些需求在之前枯燥的企业内部应用开发中,还是很难见到的,毕竟内部应用更多的是业务流程的体现。....
分类:
其他好文 时间:
2014-07-13 19:13:57
阅读次数:
266
1:输入命令gredit /etc/hosts
这样你就打开了一个文本,然后在文本的末尾进行添加如下:
ip地址 主机名
192.168.0.125 hadoop
保存退出。...
分类:
系统相关 时间:
2014-07-13 18:14:09
阅读次数:
229
hadoop的安装不难,但是需要做不少的准备工作。
一、JDK
需要先安装jdk。centos下可以直接通过yum install java-1.6.0-openjdk来安装。不同发布版的安装方式可能不一样。
之后,需要设置ssh为密钥认证登录。如果没有这一步,那么以后每次hadoop运行的时候都会提示输入密码。可以直接ssh-keygen -t rsa一路回车生成ssh的密钥对,然...
分类:
其他好文 时间:
2014-07-13 18:12:08
阅读次数:
278
前面几章节谈论了企业如何利用大数据帮助企业建立精准营销模型,大家了解了"大数据"\"小数据",那么数据本身的问题解决了,今天我说一下另外一个非常重要的概念,就是"即时性"。可以说大数据最重要的意义之一是解决了营销上的“实时性”问题,在当下手机、平板多屏运作,快速处理用..
分类:
其他好文 时间:
2014-07-13 15:18:57
阅读次数:
183
最近一段时间,因为搞hadoop的缘故,考虑到启动linux桌面会给电脑带来比较卡。。所以就将图形界面的启动给关闭,完全在命令的模式下使用linux。
使用yum搭建了ftp服务。。yum的使用参考:http://blog.csdn.net/enson16855/article/details/9140623
windows使用FileZilla连接linux的ftp,比较郁闷的是上传问题,弄...
分类:
其他好文 时间:
2014-07-13 14:04:11
阅读次数:
324