java写爬虫服务，思路是线程池，任务队列，限制并行线程数即可。 go要用另一种设计思路，不能在线程层面限制，协程的异步请求，如果不作处理，并行发出所有网络请求，因网络请求数过多，会抛出异常 低版本的go可以并行执行map的操作，高版本会报异常，需要把map改为array,改起来很简单 ...
分类：
其他好文 时间：
2017-02-20 19:47:49
阅读次数：
200
在脚本里用&后台打开多个子进程，用wait命令可以使这些子进程并行执行。 例1： 例2： 例3： 用管道fifo文件来处理并发，本例转自https://my.oschina.net/sanpeterguo/blog/133304 本例让博主学到很多，用到管道，read -u，exec的相关知识，后续 ...
分类：
系统相关 时间：
2017-02-18 23:55:38
阅读次数：
674
遇到的问题： ETL 作业调度，用shell控制。对于并行执行的作业，采用shell并行执行。 这样的话 作业就可以并行着做 ...
分类：
系统相关 时间：
2017-02-12 14:24:07
阅读次数：
209
1、概述:C#支持多线程并行执行程序,一个线程有他单独的执行路径,能够与其他线程同时执行,一个程序是由一个单线程开始,该单线程由CLR(公共语言运行时)和操作系统创建而成,并具有多线程创建额外线程的功能。 (1)、主线程和子线程分别执行不同的任务 输出结果: 无限输出x和y; (2)主线程和子线程分 ...
分类：
编程语言 时间：
2017-01-22 18:19:01
阅读次数：
177
务四大特性(简称ACID) 1、原子性(Atomicity)：事务中的全部操作在数据库中是不可分割的，要么全部完成，要么均不执行。 2、一致性(Consistency)：几个并行执行的事务，其执行结果必须与按某一顺序串行执行的结果相一致。 3、隔离性(Isolation)：事务的执行不受其他事务的干 ...
分类：
其他好文 时间：
2017-01-20 16:30:39
阅读次数：
148
并行和并发是即相似又有区别（微观概念）： 并行：指两个或多个事件在同一时刻点发生； 并发：指两个或多个事件在同一时间段内发生。 在操作系统中，在多道程序环境下，并发性是指在一段时间内宏观上有多个程序在同时运行，但在单CPU系统中，每一时刻却能有一道程序执行（时间片），故微观上这些程序只能分时地交替执 ...
分类：
编程语言 时间：
2017-01-15 10:48:04
阅读次数：
225
上一篇已经将单条查重语句调整到最优，但该语句是以单线程方式执行。能否利用多处理器，让去重操作多线程并行执行，从而进一步提高速度呢？比如我的实验环境是4处理器，如果使用4个线程同时执行查重sql，理论上...
分类：
数据库 时间：
2017-01-13 13:05:28
阅读次数：
269
1. 线程的基本概念 简单的讲进程就是程序分配在内存当中，等待处理器进行处理，请记住线程会消耗大量的操作系统资源。多个线程共享一个物理处理器将导致处理器忙于处理管理这些进程，而无法运行程序。 使用线程通常是一个操作系统的任务，试图在一个单核CPU上并行执行计算任务是没有任何意义的，可能比顺序执行花费... ...
分类：
编程语言 时间：
2016-12-09 19:37:59
阅读次数：
203
原谅我中英文混杂。 现在，我需要多个程序同时运行，每个程序都会多次运行GPU kernel。这些Kernels 能否并行执行呢？ 答案是 不能并行执行 （除非使用 GPU multi-process server) 如果是runtime 创建的primary context，一个程序的多个线程可以共 ...
分类：
其他好文 时间：
2016-12-05 20:13:43
阅读次数：
400
System.Threading.Tasks.Parallel类提供了Parallel.Invoke，Parallel.For，Parallel.ForEach这三个静态方法。 1 Parallel.Invoke 尽可能并行执行所提供的每个操作，除非用户取消了操作。 方法： 1）public sta ...
分类：
编程语言 时间：
2016-12-04 16:28:27
阅读次数：
178
