Spark计算速度远胜于Hadoop的原因之一就在于中间结果是缓存在内存而不是直接写入到disk,本文尝试分析Spark中存储子系统的构成,并以数据写入和数据读取为例,讲述清楚存储子系统中各部件的交互关系。
分类:
其他好文 时间:
2014-05-09 05:14:32
阅读次数:
405
#viCA.sh看结构:定义两个函数(32-55,57-59*);第二个函数,比较使用啊,可以收藏。第二个函数usage(){echo"usage:$0-newcert|-newreq|-newreq-nodes|-newca|-sign|-verify">&2}最终的效果就是这样(实现见后边);init.d下的脚本常常有,用起来挺好。
分类:
其他好文 时间:
2014-05-08 17:04:29
阅读次数:
253
基本架构如上图所示,线程组线程是等待线程队列的守护线程,当队列中有数据的时候,线程组守护线程逐个唤醒,当队列中inotify事件较多的时候就会被全部唤醒一起工作。这样设计的目的是能够同时处理多个inotify事件,重发利用服务器的并发能力(核数*2+2)。之所以称之为线程组..
分类:
其他好文 时间:
2014-05-08 16:43:41
阅读次数:
461
1、Apache介绍Apache是世界使用排名第一的Web服务器软件,可以运行在几乎所有广泛使用的计算机平台上,阿帕奇是北美印第安人的一个部落,在美国的西南部。也是一个基金会的名称API扩展,将Perl/Python等解释器编译到服务器中Apache的特点是简单、速度快、性能稳定,并可做代理..
分类:
其他好文 时间:
2014-05-08 16:42:41
阅读次数:
287
使用shell判断系统时区if[[!`grep-aCST-8/etc/localtime`]];then
rm-rf/etc/localtime
ln-s/usr/share/zoneinfo/Asia/Shanghai/etc/localtime
fiNginx日志切割脚本#!/bin/bash
logs_path="/alidata/server/log/nginx/"
mv${logs_path}access.log${logs_path}access_$(date-d"ye..
分类:
系统相关 时间:
2014-05-08 16:41:18
阅读次数:
403
1、下载ApacheTomcat[http://tomcat.apache.org]2、解压、重命名、拷贝到指定目录下载完成后的压缩包解压后的文件夹重命名文件夹为tomcat剪切到路径[/usr/lib]此路径根据个人需要自由存放,但要记住路径地址,后面赋予权限时需要3、赋予目录权限[以下命令中的路径都使用绝对路..
分类:
系统相关 时间:
2014-05-08 16:28:41
阅读次数:
478
Java读取word文件的程序演示
完成对office文件的操作可以借助apache.poi包(我用的poi-3.10-FINAL),导入相应的jar包(最好全部导入)...
分类:
编程语言 时间:
2014-05-08 15:49:21
阅读次数:
361
Linux下如何让CPU负载瞬间升高?前段时间,有一个命令组合想不起来是什么了,上网搜索了一番也没有找到合适的结果,最后好不容易翻看以前测试监控服务器时配置的脚本,终于找到了。这是一个很简洁的命令行,当初前面是记起来了,cat/dev/urandom(注意不是/dev/random),后面..
分类:
其他好文 时间:
2014-05-08 11:12:58
阅读次数:
267
一、简介Tomcat服务器是一个免费的开放源代码的Web应用服务器,属于轻量级应用服务器,在中小型系统和并发访问用户不是很多的场合下被普遍使用,是开发和调试JSP程序的首眩对于一个初学者来说,可以这样认为,当在一台机器上配置好Apache服务器,可利用它响应对HTML(标准通用..
分类:
Web程序 时间:
2014-05-08 11:02:39
阅读次数:
877
基本概念 Struts是Apache 基金会Jakarta 项目组的一个Open Source
项目,它采用MVC模式,能够很好地帮助java 开发者利用J2EE开发Web应用。和其他的java架构一样,Struts
也是面向对象设计,将MVC模式"分离显示逻辑和业务逻辑"的能力发挥得淋漓尽致。St...
分类:
编程语言 时间:
2014-05-08 10:17:09
阅读次数:
542