Spark生态圈，也就是BDAS（伯克利数据分析栈），是伯克利APMLab实验室精心打造的，力图在算法（Algorithms）、机器（Machines）、人（People）之间通过大规模集成，来展现大数据应用的一个平台，其核心引擎就是Spark，其计算基础是弹性分布式数据集，也就是RDD。通过Spark生态圈，AMPLab运用大数据、云计算、通信等各种资源，以及各种灵活的技术方案，对海量不透明的数...
分类：
其他好文 时间：
2014-06-11 06:59:31
阅读次数：
288
共享内存区是可用IPC形式中最快的。一旦内存区映射到共享它的进程的地址空间，进程间数据的传递就不再涉及内核。然而往该共享内存区存放信息或从中取走信息的进程间通常需要某种形式的同步。不再涉及内核是指：进程不再通过执行任何进入内核的系统调用来彼此传递数据。内核必须建立允许各个进程共享该内存区的内存映射关系，然后一直管理内存区。
默认情况下通过fork派生的子进程并不与其父进程共享内存区。
mmap...
分类：
系统相关 时间：
2014-06-11 06:34:25
阅读次数：
439
ls目录文件uname现实当前系统信息clear清理history历史记录ctrl+R搜索历史记录ESC按完之后按.补齐上次参数切换root用户su-使用管理员权限运行命令sudo现实当前用户信息id修改当前用户密码passwd命令+&在后台运行进程jobs查看后台作业ctrl+Z暂停某个程序bg控制进程继续在后..
分类：
系统相关 时间：
2014-06-10 22:56:07
阅读次数：
384
安装了XML Barcode
Webservice条形码控件以后，消费web服务的应用程序可以从安装了此web服务的服务器请求和接受XML条码图像。此web服务的托管版本可用于IDAtomation的容错的web服务器上而不用安装任何其他的软件。具体功能：动态的集成XML条码到可支持Web服务的应用...
分类：
Web程序 时间：
2014-06-10 21:41:37
阅读次数：
331
??6月3日到5日，用了3天时间，参加了cmmi-dev的简介课程培训，参加培训真的比上班都要累很多啊！每天早上9点到下午6点，中午吃饭加休息总共1小时，晚上还有作业要做，每天睡觉都要到11点了，而且作业还不一定写的完，早上还要早早起床坐两个小时的车去上课，很久都没这么辛苦过了。不过辛苦总是有回报的，下面就详细说说这3天的收获。1、知识梳理cmmi-dev v1.3版，可以简单的理解成将22个过程...
分类：
其他好文 时间：
2014-06-10 19:20:32
阅读次数：
251
补上作业，MariaDB10和MySQL5.6社区版压力测试，见下图：sysbench（10.8.8.43）MySQL5.6和MariaDB10.0.11（10.8.8.100）压力测试参数：sysbench--test=oltp--mysql-table-engine=innodb
--oltp-table-size=10000000--max-requests=0--max-time=900
--num-threads=512--mysql-ho..
分类：
数据库 时间：
2014-06-10 18:52:48
阅读次数：
384
Multipath I/O (多路径)
在计算机存储技术里,多路径提供了容错和性能提高,在计算机系统里CPU有多条物理路径通道,块存储设备通过总线,控制器,交换设备以及桥接设备来连接。
简单举例同一台计算机里1块SCSI磁盘连接2个SCSI控制器或者磁盘连接到两个FC端口。如果其中1个控制器，端口或交换设备故障，那操作系统就会自动切换I/O路径到冗余的控制器为应用程序使用,但...
分类：
其他好文 时间：
2014-06-10 14:57:54
阅读次数：
465
1：Spark1.0.0属性配置方式
Spark属性提供了大部分应用程序的控制项，并且可以单独为每个应用程序进行配置。
在Spark1.0.0提供了3种方式的属性配置：
SparkConf方式
SparkConf方式可以直接将属性值传递到SparkContext；SparkConf可以对某些通用属性直接配置，如master使用setMaster，...
分类：
其他好文 时间：
2014-06-10 14:47:43
阅读次数：
280
JEECG开源社区架构师培训班*******************************************教学特点学原理，写架构，非学框架，用框架*******************************************教学方法老师带着你学习编程，每个技术课题，会有对应的视频和作业。同学以自学为主，遇到问题找老师解答。每个课题，需交作业，作业完成既可进行下一课题学习！****...
分类：
其他好文 时间：
2014-06-10 13:39:42
阅读次数：
222
DAL是指Data Access Layer，DALFactory是用于创建数据访问对象的工厂，本质上是采用了抽象工厂的设计模式，目的是支持多种数据访问层，比如sql server和oracle两种实现；同时又利用了.net的反射机制，通过配置文件即可确定采用哪种数据访问实现；IDAL是数据访问层接口，这样做的好处是使业务逻辑层调用数据访问层的接口即可实现数据库的增删改等操作，业务逻辑层与数据访问...
分类：
其他好文 时间：
2014-06-10 07:29:48
阅读次数：
183
