<!-- flowchart 箭头图标 勿删 --> 摘要：本文主要对tf的一些常用概念与方法进行描述。 tf函数 TensorFlow 将图形定义转换成分布式执行的操作, 以充分利用可用的计算资源(如 CPU 或 GPU。一般你不需要显式指定使用 CPU 还是 GPU, TensorFlow 能自 ...
分类：
其他好文 时间：
2019-02-15 22:35:20
阅读次数：
230
为了提高大规模数据处理的能力，matlab 的 GPU 并行计算，本质上是在 cuda 的基础上开发的 wrapper，也就是说 matlab 目前只支持 NVIDIA 的显卡。 1. GPU 硬件支持 首先想要在 matlab 中使用 GPU 加速运算，需要计算机配备有 NVIDIA 的显卡，可在 ...
分类：
其他好文 时间：
2019-01-28 22:29:04
阅读次数：
322
第1章 课程介绍欢迎大家来到深度讲解Go语言的课堂。本课程将从基本语法讲起，逐渐深入，帮助同学深度理解Go语言面向接口，函数式编程，错误处理，测试，并行计算等元素，并带领大家实现一个分布式爬虫的实战项目。第2章 基础语法量，常量，类型，选择，循环，函数，指针，本章节带领大家学习一门新语言所需的必备语 ...
分类：
编程语言 时间：
2019-01-20 00:06:31
阅读次数：
234
科学计算碰到数据量很大的时候，往往非常消耗时间。使用多核进行并行计算是加快计算速度的主要方法，而显卡天生具有成百上千个计算核心，所以使用 GPU 进行计算也就越来越流行。得益于 Nvidia 提供的 CUDA，我们编写利用 GPU 进行计算的程序越来越方便。那么，在 Linux 系统下，使用 CUD... ...
分类：
系统相关 时间：
2019-01-14 20:20:48
阅读次数：
306
一、什么是RDD RDD（Resilient Distributed Dataset）叫做弹性分布式数据集，是Spark中最基本的数据抽象，它代表一个不可变、可分区、里面的元素可并行计算的集合。RDD具有数据流模型的特点：自动容错、位置感知性调度和可伸缩性。RDD允许用户在执行多个查询时显式地将工作 ...
分类：
其他好文 时间：
2019-01-13 01:58:56
阅读次数：
233
直播平台， 需要解决的 技术点 是 2 个： 1 直播数据 的 传输 和 在 客户端 的 播放 2 大并发 关于 网络通信， 数据传输， 可以参考 《利用 MessageRPC 和 ShareMemory 来实现 分布式并行计算》 https://www.cnblogs.com/KSongKing/ ...
分类：
Web程序 时间：
2019-01-10 15:32:04
阅读次数：
184
Parallel Python mpi multiprocessing https://wiki.python.org/moin/ParallelProcessing https://www.parallelpython.com/content/view/15/30/ ...
分类：
编程语言 时间：
2019-01-08 15:08:18
阅读次数：
397
主要内容来自维基百科 先上一张图大略直观感受一下： 分布式系统是联网计算机组，其工作目标相同。术语“ 并发计算 ”，“ 并行计算 ”和“分布式计算”有很多重叠，它们之间没有明显的区别。[15]同一系统可以表征为“并行”和“分布式”; 典型分布式系统中的处理器并行运行。[16]并行计算可以被看作分布式 ...
分类：
其他好文 时间：
2019-01-08 00:59:54
阅读次数：
211
今天给大家分享的技术学习是：浅谈弹性分布式数据集RDD。 一、RDD定义 RDD（Resilient Distributed Dataset）叫做分布式数据集，是Spark中基本的数据抽象，它代表一个不可变(数据和元数据)、可分区、里面的元素可并行计算的集合。其特点在于自动容错,位置感知性调度和可伸 ...
分类：
其他好文 时间：
2019-01-07 21:11:04
阅读次数：
175
使用本地变量 尽量使用本地变量，而不是创建一个类或实例的变量。 使用不可变类 String、Integer等。不可变类可以降低代码中需要的同步数量。 最小化锁的作用域范围：S=1/(1-a+a/n) a：并行计算部分所占比例 n：并行处理结点个数 S：加速比 当1-a等于0时，没有串行只有并行，最大 ...
分类：
编程语言 时间：
2019-01-06 11:16:53
阅读次数：
358
