“决胜云计算大数据时代” Spark亚太研究院100期公益大讲堂 【第17期互动问答分享】 ? Q1:为了加快spark?shuffle?的执行速度是否可以把spark_local_dirs?指向一块固态硬盘上面,这样做是否有效果。 可以把...
分类:
其他好文 时间:
2014-10-17 17:02:15
阅读次数:
154
【普及分享】云计算=/=云主机,阿里云=低价低端...
分类:
其他好文 时间:
2014-10-17 16:59:43
阅读次数:
146
安装和使用ElasticsearchElasticsearch是开源搜索平台的新成员,实时数据分析的神器,发展迅猛,基于Lucene、RESTful、分布式、面向云计算设计、实时搜索、全文搜索、稳定、高可靠、可扩展、安装+使用方便,介绍都说的很好听,好不好用拿出来遛一遛。做了个简单测试,在两台完..
分类:
其他好文 时间:
2014-10-17 15:45:22
阅读次数:
222
并行计算是一台计算机,配备有多处理机,多处理机之间进行合同协作计算,最终结果由一台计算机处理分布式计算是多台联网的计算机,有各自的主机和处理器,通过网络分配共享计算任务和计算信息云计算,指计算机通过网络发送计算命令给服务器,让服务器执行计算任务并将结果返还给发送命令的计算机关系的话,以计算机用户来说...
分类:
其他好文 时间:
2014-10-17 02:00:43
阅读次数:
302
7,在SparkWorker1和SparkWorker2上完成和SparkMaster同样的Hadoop 2.2.0操作,建议使用SCP命令把SparkMaster上安装和配置的Hadoop的各项内容拷贝到SparkWorker1和SparkWorker2上;
8,启动并验证Hadoop分布式集群
第一步:格式化hdfs文件系统:
第二步:进入...
分类:
其他好文 时间:
2014-10-16 16:28:02
阅读次数:
269
ElasticSearch是一个基于Lucene构建的开源,分布式,RESTful搜索引擎。设计用于云计算中,能够达到实时搜索,稳定,可靠,快速,安装使用方便。支持通过HTTP使用JSON进行数据索引。
我们建立一个网站或应用程序,并要添加搜索功能,令我们受打击的是:搜索工作是很难的。我们希望我们...
分类:
其他好文 时间:
2014-10-16 15:55:32
阅读次数:
181
随着互联网、物联网、云计算等技术的快速发展,以及智能终端、网络社会、数字地球等信息体的普及和建设,全球数据量出现爆炸式增长。大数据的使用在日常生活中也广泛应用:预测疾病、预测奖项、支撑智能交通、助力企业商业决策、分析客户心理等等。大数据的作用正在日渐凸显,但同时,大数据的安全问题也不容忽视,个人隐私...
分类:
其他好文 时间:
2014-10-16 12:26:52
阅读次数:
237
铛~铛~铛~Docker即将颠覆整个软件产业,从云计算平台到软件开发、测试,整个SDLC都会极度依赖Docker。圈子里面一定有很多讨论Docker的话题,简而言之,Docker其实只解决一个问题: QA:程序无法启动!!! DEV:不可能,我的机器上可以运行大家可以慢慢体会以上对话。但无论怎样.....
分类:
其他好文 时间:
2014-10-16 02:05:41
阅读次数:
303
2014年最热门的IT技术大赛,由Spark亚太研究院联合国内领先的IT技术创新。面向云计算大数据从业者、Spark技术爱好者及数百所高校在读学生。无论是对Spark有浓厚兴趣的初学者、或者Spark应用高手,还是Spark源码级别大牛,都可以借助本次大赛,一展才华,就Spark技术与应用实践展开交流及切磋。...
分类:
其他好文 时间:
2014-10-14 19:40:09
阅读次数:
221
“发现最有正能量的网络达人”,Spark开发者大赛火热进行!2014年9月30日,2014Spark开发者大赛在北京正式启动。本次大赛由Spark亚太研究院联合国内领先的IT技术创新与发展的互联网媒体平台51CTO传媒及国内最大的IT在线教育平台51CTO学院在亚太范围内发起。面向云计算大数据从..
分类:
其他好文 时间:
2014-10-14 19:30:40
阅读次数:
275