写在之前:MPI简述:MPI的全称是MessagePassingInterface即标准消息传递界面,可以用于并行计算。MPI有多种实现版本,如MPICH,CHIMP以及OPENMPI。这里我们采用MPICH版本。MPI是一个库,而不是一门语言。许多人认为,MPI就是一种并行语言,这是不准确的。但是,按照并行语言的..
分类:
其他好文 时间:
2016-10-05 01:20:02
阅读次数:
328
云计算这个概念从提出到今天,差不多10年了。这10年间,云计算取得了飞速的发展与翻天覆地的变化,是继1980年代大型计算机到客户端-服务器的大转变之后的又一次巨变,先是机器越来越小,然后。。。然后就云里雾里了。 云计算到底是什么鬼? 云计算的基础是并行计算 如果想让计算机变强,怎么办? 那还不简单, ...
分类:
其他好文 时间:
2016-09-27 01:51:04
阅读次数:
301
1 基础设施程序最基本的处理就是数据IO以及为了并行计算所做的操作,它们通常会作为程序的底层框架,供上层使用。2 交互从PC到现在的移动设备还有VR,人机交互中的输入设备在不断自然化,可是展示界面的元...
分类:
其他好文 时间:
2016-09-26 18:09:15
阅读次数:
120
一、引言 Spark内存计算框架 中国Spark技术峰会 十二场演讲 大数据改变世界,Spark改变大数据 大数据: 以Hadoop 2.x为主的生态系统框架(MapReduce并行计算框架) 存储数据、处理数据 分布式 Spark: 类似于MapReduce的另外一种分布式计算框架 核心: 数据结 ...
分类:
其他好文 时间:
2016-09-25 15:41:54
阅读次数:
101
转载http://my.oschina.net/Chanthon/blog/150500 map和reduce是hadoop的核心功能,hadoop正是通过多个map和reduce的并行运行来实现任务的分布式并行计算,从这个观点来看,如果将map和reduce的数量设置为1,那么用户的任务就没有并行 ...
分类:
其他好文 时间:
2016-09-24 11:55:35
阅读次数:
143
流计算: Strom:针对“边达到边计算”的实时流计算框架,可在一个时间窗口上对数据流进行在线实时分析。 同样的还有Yahoo提出的S4系统。 批计算: Hadoop:是一个提供分布式存储和计算的软件框架,它具有无共享、高可用、弹性可扩展的特点,非常适合处理海量数据。先存储再计算。 实时批计算: S ...
分类:
其他好文 时间:
2016-09-09 15:04:21
阅读次数:
185
文章摘要 本文首先介绍了并行计算的基本概念,然后简要阐述了R和并行计算的关系。之后作者从R用户的使用角度讨论了隐式和显示两种并行计算模式,并给出了相应的案例。隐式并行计算模式不仅提供了简单清晰的使用方法,而且很好的隐藏了并行计算的实现细节。因此用户可以专注于问题本身。显示并行计算模式则更加灵活多样, ...
分类:
其他好文 时间:
2016-09-09 10:03:18
阅读次数:
512
SqlSugar ORM优点: 1、高性能,达到原生最高水准,比SqlHelper性能要高,比Dapper快30% 比EF快50% 2、支持多种数据库 ,sql版本更新最快,其它会定期更新,可以在多种数据库用一种编程方式 3、支持.net Core 4、支持多库并行计算 5、带有实体生成函数和T4模 ...
分类:
其他好文 时间:
2016-09-08 14:32:58
阅读次数:
182
什么是云计算?云计算的角色是如何变迁的。云计算未来的形态是什么?本文试图从技术演化,云端应用架构的发展等几个维度去揭示云计算未来的演化趋势。 不 同的用户,对云计算的认知是不同的,对于一个计算机专业的硕士研究生来说,他会告诉你,云计算就是网格计算,并行计算;对于一个小白用户来说,他会告诉 你,云计算 ...
分类:
其他好文 时间:
2016-08-20 19:28:35
阅读次数:
129
Hadoop简介: Hadoop是一个实现了Google云计算系统的开源系统,包括并行计算模型Map/Reduce,分布式文件系统HDFS,以及分布式数据库Hbase Map/Reduce: MapReduce是hadoop的核心组件之一,hadoop要分布式包括两部分,一是分布式文件系统hdfs, ...
分类:
其他好文 时间:
2016-08-20 13:12:04
阅读次数:
137