码迷,mamicode.com
首页 >  
搜索关键字:hadoop 大数据 云计算    ( 28457个结果
坚持一下,正态的哲学就在一个百分点——技术需要不断积累
现状IT日新月异,完全让人慌张和措手不及,不久前刚出来MVC,很快就连升几个版本;其他的,Swift,智能穿戴,大数据等等,让我这样笨拙的人情何以堪啊!!!是的,我爱技术,但同时我又比较笨和比较浮躁。(不对称关系组合在一起,真揪心)说比较笨,是因为我CPU处理速度不是那么地快,随着年龄的增长,确实力...
分类:其他好文   时间:2014-06-21 00:01:54    阅读次数:249
Hadoop 2.2.0 Job源代码阅读笔记
本文所有涉及的内容均为2.2.0版本中呈现。 概述: Job在创建Job并且提交的人的眼中,可以在创建的时候通过配置Job的内容,控制Job的执行,以及查询Job的运行状态。一旦Job提交以后,将不能对其进行配置,否则将会出现IllegalStateException异常。 正常情况下用户...
分类:其他好文   时间:2014-06-20 23:46:15    阅读次数:374
hive 学习之异常篇
一、刚装上hive在执行hive启动的过程中出现[hadoop@localhost hive-0.6.0]$ hiveInvalid maximum heap size: -Xmx4096mThe specified size exceeds the maximum representable si...
分类:其他好文   时间:2014-06-20 22:17:04    阅读次数:278
简要的谈谈文本数据挖掘的一般步骤
[QQ群: 189191838,对算法和C++感兴趣可以进来] 数据挖掘领域一直都非常的火。现在炒的非常热的大数据,其实也是数据挖掘的一个应用而已,不管工程师用的是Hadoop还是其他平台,其实都是对一堆的数据进行分析,计算,然后得到我们希望得到的结果。所以我们可以知道,文本数据挖掘的必要性是...
分类:其他好文   时间:2014-06-20 21:49:12    阅读次数:255
FastDFS分布式文件存储
存储能力是提供给上层业务系统以实现文件存取服务,这个存储能力为XDFS,即可扩展的分布式文件系统,实现的原理是封装了第三方的分布式存储系统实现的。目前封装的第三方分布式系统包括FastDFS、Hadoop的HDFS,所提供的存储接口如下: 1 文件上传 2 文件断点上传 3 文件...
分类:其他好文   时间:2014-06-20 21:21:55    阅读次数:470
hadoop家族之mahout安装
步骤一、下载mahout http://www.apache.org/dyn/closer.cgi/mahout/我下载的是mahout-distribution-0.9.tar.gz 16-Feb-2014 08:31 66M 步骤二、下载完成后放到Linux中并解压解压命令:tar -zxvf ...
分类:其他好文   时间:2014-06-20 21:09:06    阅读次数:178
二、Ubuntu14.04下安装Hadoop2.4.0 (伪分布模式)
在Ubuntu14.04下安装Hadoop2.4.0 (单机模式)基础上配置一、配置core-site.xml/usr/local/hadoop/etc/hadoop/core-site.xml 包含了hadoop启动时的配置信息。编辑器中打开此文件sudo gedit /usr/local/had...
分类:其他好文   时间:2014-06-20 20:25:13    阅读次数:270
安装hadoop2.4.0遇到的问题
一、执行start-dfs.sh后,datenode没有启动 查看日志如下: 2014-06-18 20:34:59,622 FATAL org.apache.hadoop.hdfs.server.datanode.DataNode: Initialization failed for bloc.....
分类:其他好文   时间:2014-06-20 19:51:18    阅读次数:160
云朵”方案化解“私有云”安全过渡期难题
云计算因为能够提供虚拟化的资源池、弹性的服务能力、自助服务等,深得CIO们的青睐,为了提高企业IT设备的利用率,提高服务容灾的能力,提高对业务支撑的快速响应能力,大多数的企业都开始尝试企业私有云的建设。 私有云安全的尴尬现状 一般来说,从现有的IT管理体系过渡到私有云平台,大致需要几个步骤:...
分类:其他好文   时间:2014-06-20 18:47:58    阅读次数:250
Hadoop学习资料整理
hadoop 0.18文档(详细介绍Hadoop,MapReduce,FS Shell,Streaming等)hadoop资料汇总(XX搜集的,还没看)streaming(非java程序员的福音)Hadoop Streaming编程实例Hadoop Streaming编程Hadoop Streami...
分类:其他好文   时间:2014-06-20 18:33:43    阅读次数:160
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!