场景我有一批平铺数据放在txt文件,其量大概在10W条,接下来我们希望将这10W条记录进行切割获取,并且将单条数据分析校验,然后插入到DB中。前提是我们使用的是HTTP文件上传方式来导入数据。现在的问题是:如果用户直接上传,然后我们一条条数据读取、校验并将其插入数据库,这个过程将会耗费非常长的时间(大概在1小时以上),而这么长的时间等待会导致apache、nginx或者浏览器端(一般情况下是60分...
分类:
Web程序 时间:
2014-09-12 10:16:13
阅读次数:
221
技术说明:TCMalloc全称Thread-CachigMalloc,是谷歌开发的开源工具Google-preftools中的一个成员。与标准的glibc库的Malloc相比,TCMalloc库在内存分配效率和速度上要高很多,在很大程度上提高了服务器在高并发情况下的性能,从而降低了系统的负载。一.安装libunwind:1.安装..
分类:
其他好文 时间:
2014-09-12 02:27:53
阅读次数:
248
nginx 是优秀的反向代理服务器,这里主要讲它的健康检查和负载均衡机制,以及这种机制带来的问题。所谓健康检查,就是当后端出现问题(具体什么叫出现问题,依赖 于具体实现,各个实现定义不一样),不再往这个后端分发请求,并且做后续的检查,直到这个后端恢复正常。所谓负载均衡,就是选择后端的方式,如何(根据...
分类:
其他好文 时间:
2014-09-11 19:14:52
阅读次数:
233
本文描述了如何使用Nginx实现在应用层实现7层负载均衡功能,Nginx支持虚拟主机,可以按照轮询,IP哈希,URL哈希,权重方式对后端服务器做负载均衡,还支持后端服务器健康检查功能。废话不多说,详细配置见下文~测试模型如下:1、一台Nginx做负载负载均衡代理 具体配置centos5.8 ip 1...
分类:
其他好文 时间:
2014-09-11 19:12:42
阅读次数:
126
1、nginx相对于apache优点: 轻量级同样起web 服务比apache占用更少内存及资源 抗并发nginx 处理请求异步非阻塞而apache 则阻塞型高并发下nginx 能保持低资源低消耗高性能 高度模块化设计编写模块相对简单 社区活跃各种高性能模块出品迅速啊 apache 相对于nginx...
分类:
其他好文 时间:
2014-09-11 18:55:02
阅读次数:
189
1.nginx的下载 到nginx for windows由第三方编译的nginx Windows 版本下载.我下载的版本是nginx-1.6.1。2.安装和一些简单的指令命令行进入c:\nginx目录,运行nginx.exe,启动控制台窗口。默认启用80端口。nginx查看日志必须在logs目录下...
Nginx ("engine x") 是一个高性能的 HTTP 和反向代理服务器,也是一个 IMAP/POP3/SMTP代理服务器。 Nginx 是由 Igor Sysoev 为俄罗斯访问量第二的 Rambler.ru 站点开发的,,因它的稳定性、丰富的功能集、示例配置文件和低系统资源的消耗而闻名。...
分类:
其他好文 时间:
2014-09-11 15:13:32
阅读次数:
198
检查是否安装该程序: which nginx ? ? ? ? ??#查看nginx是否存在 which php? ? ? ? ? ? ?#查看php是否存在 which mysql ? ? ? ? ?#查看mysql是否存在 2 yum list nginx ? ? ? ? ? ? #列...
分类:
系统相关 时间:
2014-09-11 12:39:42
阅读次数:
370
最近在用Nginx发布多个站点测试,使用了87、88端口,88端口访问正常,87端口就怎么也访问不了,点击更多,提示错误代码:ERR_UNSAFE_PORT不安全的端口?尼玛就只靠端口就能解决不安装问题了?不想修改浏览器设置的就改用其它端口吧,搜索了一下,Firefox也有类似的端口限制;如果非要使用类似的端口,我们要做的是允许访问非常规端口地址,解决办法:选中Google Chrome 快捷方式...
分类:
其他好文 时间:
2014-09-10 22:34:21
阅读次数:
751
一、负载均衡概述LB:LoadBalancing负载均衡分软件和硬件两方面实现。1、软件:一般位于TCP/IP的四层和七层,典型的有:lvs(第四层,传输层)haproxy,nginx(第七层,应用层)2、硬件:生产硬件的厂商有很多,常见的有F5公司的BIG-IP优秀的安全加速接入解决方案Citrix公司的Netscal..
分类:
其他好文 时间:
2014-09-10 19:41:01
阅读次数:
250