在 Java、PHP 或者.net 等服务器端语言中，会为每一个客户端连接创建一个新的线程。而每个线程需要耗费大约 2MB 内存。也就是说，理论上，一个 8GB 内存的服务器可以同时连接的最大用户数为 4000 个左右。要让 Web 应用程序支持更多的用户，就需要增加服务器的数量，而 Web 应用程 ...
分类：
其他好文 时间：
2019-04-03 09:21:52
阅读次数：
221
Hadoop是分布式文件系统 并行处理系统：高效存储和高效处理组件 Mapreduce，函数式编程机制，分Map阶段和reduce阶段，他不但是一个编程方式，同时也是个运行框架，它分两个阶段 Map阶段：抽取各个键值对生成键值对结果集（一般存在本地），这些键值对存储下来并进行排序 reduce阶段： ...
分类：
其他好文 时间：
2019-03-28 19:29:04
阅读次数：
182
一、Maptask并行度与决定机制 1.一个job任务的map阶段的并行度默认是由该任务的大小决定的； 2.一个split切分分配一个maprask来并行处理； 3.默认情况下，split切分的大小等于blocksize大小； 4.切片不是mapper类中对单词的切片，而是对每一个处理文件的单独切片 ...
分类：
其他好文 时间：
2019-03-24 23:28:59
阅读次数：
691
一、大型网站软件系统的特点 1.高并发、大流量 高并发是互联网分布式系统架构设计中必须考虑的因素之一，它通常是指，通过设计保证系统能够同时并行处理多个请求。 (1)响应时间:系统对请求做出响应。例如系统处理一个HTTP请求需要200ms,这个200ms就是系统的响应时间。 (2)吞吐量:单位时间内处 ...
分类：
Web程序 时间：
2019-03-09 21:58:29
阅读次数：
342
linux负载均衡总结性说明（四层负载/七层负载） 在常规运维工作中，经常会运用到负载均衡服务。负载均衡分为四层负载和七层负载，那么这两者之间有什么不同？废话不多说，详解如下： 一. 什么是负载均衡1）负载均衡（Load Balance）建立在现有网络结构之上，它提供了一种廉价有效透明的方法扩展网络 ...
分类：
系统相关 时间：
2019-03-08 15:11:18
阅读次数：
196
应用：负载均衡技术 1.大量的并发访问或数据流分担到多台节点设备上分别处理，减少用户等待响应的时间； 2.单个的负载的运算分担到多台节点设备上做并行处理，每个节点设备处理结束后将结果汇总，返回给用户，使得系统的处理能力得到大幅度提升。 1.Nginx下载（到官网下载Windows版本：http:// ...
一、什么是高并发 定义： 高并发(High Concurrency)是使用技术手段使系统可以并行处理很多请求。 关键指标： -响应时间(Response Time) -吞吐量(Throughput) -每秒查询率QPS(Query Per Second) -每秒事务处理量TPS(Transactio ...
分类：
其他好文 时间：
2019-02-19 13:49:51
阅读次数：
280
一、什么是高并发 高并发（High Concurrency）是互联网分布式系统架构设计中必须考虑的因素之一，它通常是指，通过设计保证系统能够同时并行处理很多请求。 高并发相关常用的一些指标有响应时间（Response Time），吞吐量（Throughput），每秒查询率QPS（Query Per ...
分类：
其他好文 时间：
2019-02-06 10:42:37
阅读次数：
213
并发:一个处理器同时处理多个任务。 并行:多个处理器或者是多核的处理器同时处理多个不同的任务. fork 输出 ...
分类：
其他好文 时间：
2019-01-20 13:57:41
阅读次数：
125
需求一个简单的需求，提交大量数据到远程服务器，此时并不需要等待返回。另一个需求，获取API数据，同时查询数据库，并行处理，加快响应速度。配置问题set_time_limitignore_user_abortfastcgi_finish_request只是结束会话后继续执行，并没有并发，勉强非阻塞curl无法非阻塞，只能等待，可以并发https://github.com/guzzle/guzzle/
分类：
Web程序 时间：
2019-01-17 23:51:06
阅读次数：
339
