一、什么是FastDFS?FastDFS是一个开源的轻量级分布式文件系统。它解决了大数据量存储和负载均衡等问题。特别适合以中小文件(建议范围:文件大小为4KB-500MB)为载体的在线服务,如相册网站、视频网站等等。在UC基于FastDFS开发向用户提供了:网盘,社区,广告和应用下载等业务的存储服务。FastDFS是一款开源的轻量级分布式文件系统纯C实现,支持Linux、FreeBSD等UNIX系
分类:
其他好文 时间:
2020-03-27 23:26:10
阅读次数:
84
RPC 的主要功能目标是让构建分布式计算(应用)更容易,在提供强大的远程调用能力时不损失本地调用的语义简洁性。 为实现该目标,RPC 框架需提供一种透明调用机制让使用者不必显式的区分本地调用和远程调用。 下面我们将具体细化 stub 结构的实现。
分类:
其他好文 时间:
2020-03-24 10:31:43
阅读次数:
63
1. 跑批是什么 顾名思义,就是应用程序对数据的批量处理。 跑批有以下特性: 大数据量:批量任务一般伴随着大量的数据处理; 自动化:要求制定时间或频率自动运行; 性能:要求在指定时间内完成批处理任务。 2. 跑批应用场景 在开发中常见的跑批应用场景如下(以目前做的系统举例): 定时的数据状态更新:到 ...
分类:
其他好文 时间:
2020-03-21 18:04:11
阅读次数:
675
c# Signalr MessageSize默认是64K 大小,设为NULL即禁用这个限制 ,自己也可以按需求改为自己需要的大小 1 public class Startup 2 { 3 public void Configuration(IAppBuilder app) 4 { 5 //// 有关 ...
类型 本地缓存 在进程的内存中缓存,是内存访问,没有远程交互开销,性能最好,但受限于单机容量,一般缓存较小且无法扩展。 分布式缓存 可以很好解决本地缓存的问题,一般分布式缓存都具有良好的水平扩展能力,对较大数据量的场景也能应对自如,但需要进行远程请求,性能不如本地缓存。 多级缓存 多级缓存用于平衡本 ...
分类:
其他好文 时间:
2020-03-15 11:34:24
阅读次数:
56
mysql大数据量使用limit分页,随着页码的增大,查询效率越低下。 测试实验 1. 直接用limit start, count分页语句, 也是我程序中用的方法: select * from product limit start, count当起始页较小时,查询没有性能问题,我们分别看下从10, ...
分类:
其他好文 时间:
2020-03-07 10:02:26
阅读次数:
47
以下分享一点我的经验 一般刚开始学SQL语句的时候,会这样写 代码如下: SELECT * FROM table ORDER BY id LIMIT 1000, 10; 但在数据达到百万级的时候,这样写会慢死 代码如下: SELECT * FROM table ORDER BY id LIMIT 1 ...
分类:
数据库 时间:
2020-03-07 09:16:34
阅读次数:
69
一、概述 WellCMS是一款开源、倾向移动端的轻量级CMS,高负载CMS,亿万级CMS,是大数据量、高并发访问网站最佳选择的轻CMS。登陆该CMS后台,某图片上传处,由于上传文件类型可控,可修改上传文件类型获取webshell。 二、复现 这个漏洞来自一次偶然的测试,一次幸运的测试,那就直接写出我 ...
分类:
Web程序 时间:
2020-03-02 11:11:45
阅读次数:
150
当需要从数据库查询的表有上万条记录的时候,一次性查询所有结果会变得很慢,特别是随着数据量的增加特别明显,这时就需要使用分页查询。对于数据库分页查询,也有很多种方法和优化的点。 谈优化前的准备工作 为了对下面列举的一些优化进行测试,需要使用已有的一张表作为实际例子。 表名:order_history。 ...
分类:
数据库 时间:
2020-03-01 10:36:33
阅读次数:
110
mongo in查询数量较多时 时间对比: 4W条数据查询速度达到3-4S 优化后可以达到0.1S-0.2S 优化原理:mongo自动Bean转化功能性能较差,改用原生mongo游标方法读取MongoDB数据文档,并在内存中做bean转化 优化前 Query query = new Query(); ...
分类:
其他好文 时间:
2020-02-22 14:16:39
阅读次数:
301