1.自己设计一个并行计算框架，应该需要考虑那些问题呢？第一个问题是：并行计算肯定是多台计算机吗，多台计算机他们之间如何划分任务？这个地方总归有一个模块来分发任务，也就意味这它就是老大，它来维护任务或者资源mapreduce在hadoop1.x版本上是jobtracker,hadoop2.x版本是..
分类：
其他好文 时间：
2016-11-15 01:53:39
阅读次数：
120
在centos7上安装Opencv的时候，停在了下载ippicv的地方，一直都下载不下来。 ippicv是一个并行计算库，其实可以不用的。 如果不想用这个并行计算库，在做Cmake的时候用参数关闭即可，但我还是建议使用这个库。 首先，手动下载[ippicv](https://raw.githubus ...
分类：
其他好文 时间：
2016-11-12 19:21:13
阅读次数：
308
版权声明：本文由文智原创文章，转载请注明出处: 文章原文链接：https://www.qcloud.com/community/article/139 来源：腾云阁 https://www.qcloud.com/community 引子： 文智平台是利用并行计算系统和分布式爬虫系统，并结合独特的语义 ...
分类：
Web程序 时间：
2016-11-06 14:15:59
阅读次数：
314
网易大数据平台的Spark技术实践 网易大数据平台的Spark技术实践 作者 王健宗 网易的实时计算需求 对于大多数的大数据而言，实时性是其所应具备的重要属性，信息的到达和获取应满足实时性的要求，而信息的价值需在其到达那刻展现才能利益最大化，例如电商网站，网站推荐系统期望能实时根据顾客的点击行为分析 ...
分类：
其他好文 时间：
2016-11-06 07:48:55
阅读次数：
317
1.实际是go运行时自己控制线程数目(线程池)，执行许多的task(goroutine)，防止线程切换的开销，充分利用多核做并行计算 2.在io等需要等待的操作发生的时候go运行时切换task，但是线程不切换继续执行其他task，io完成后挂起的task重新参与调度 3.底层处理io的实现在wind ...
分类：
其他好文 时间：
2016-10-21 20:07:08
阅读次数：
209
Floyd-Warshall算法是用于寻找加权图中非固定起止点间最短路径的经典算法，它是基于动态规划思想设计的。Floyd算法也是并行计算中常常用来作为范例进行演示的一个算法。本文将主要讨论基于MPI...
分类：
编程语言 时间：
2016-10-19 20:26:22
阅读次数：
431
在计算机科学这个日新月异的领域，新技术的不断成熟和发展总是无时无刻不在向传统领域发起着挑战和冲击。云计算，这一名词自2006年初次提出起，短短十年内已经成为信息技术领域最重要的发展之一。在借鉴传统分布式计算思想的基础上，它融合了并行计算，虚拟化，互联网，大规模资源管理等一系列技术，实现了对软硬件资源 ...
分类：
其他好文 时间：
2016-10-19 07:41:06
阅读次数：
228
1、安装python，这个没什好说的，直接装就行 2、做并行计算、数据挖掘，机器学习等一般都要用的numpy，这个在Windows版本上安装有点问题，安装比较麻烦，建议在linux上搭建环境 3、安装openmpi,（不太好装）这个在网上目前还没有比较好的快捷安装方法，一般是下载源码，编译再安装，今 ...
分类：
编程语言 时间：
2016-10-17 07:02:20
阅读次数：
190
定义 云计算是一种基于因特网的计算，它根据需求向用户提供计算处理资源或数据资源。 云计算（Cloud Computing）是 虚拟化（Virtualization） 分布式计算（Distributed Computing） 并行计算（Parallel Computing） 效用计算（Utility ...
分类：
其他好文 时间：
2016-10-14 06:52:52
阅读次数：
157
1 #include "cuda_runtime.h" 2 #include "device_launch_parameters.h" 3 #include <stdio.h> 4 #include <time.h> 5 #include <stdlib.h> 6 7 #define MAX 120 ...
分类：
其他好文 时间：
2016-10-06 22:16:51
阅读次数：
282
