简介 MongoDB更类似Mysql，支持字段索引、游标操作，其优势在于查询功能比较强大，擅长查询JSON数据，能存储海量数据，但是不支持事务。 Mysql在大数据量时效率显著下降，MongoDB更多时候作为关系数据库的一种替代。 内存管理机制 Redis数据全部存在内存，定期写入磁盘，当内存不够时 ...
分类：
数据库 时间：
2019-12-19 13:29:36
阅读次数：
104
SpringBatch 是一个大数据量的并行处理框架。通常用于数据的离线迁移，和数据处理，?持事务、并发、流程、监控、纵向和横向扩展，提供统?的接?管理和任务管理;SpringBatch是SpringSource和埃森哲为了统一业界并行处理标准为广大开发者提供方便开发的一套框架。官方地址：githu... ...
分类：
编程语言 时间：
2019-12-16 10:04:32
阅读次数：
105
压力测试、负载测试、强度测试、并发（用户）测试、大数据量测试、配置测试、可靠性测试 压力测试： 对系统不断施加压力的测试，是通过确定一个系统的瓶颈或不能接收用户请求的性能点，来获得系统能提供的最大服务级别的测试 负载测试： 对系统不断地增加压力或增加一定压力下的持续时间，直到系统的一些性能指标达到极 ...
分类：
其他好文 时间：
2019-12-15 23:35:59
阅读次数：
120
几乎任何形式的文档和报表都离不开分页，报表如何分页在 B/S 模式的 Web 报表中也是个常见的问题，特别是当大数据量的 Web 报表需要打印输出时，不可能将所有数据打印到一张纸上，这时必然涉及到报表的分页。其中，一个常常遇到的实际问题是：当数据比较多时，在分页后，常常最后一页只有几条数据，这样的报 ...
分类：
其他好文 时间：
2019-12-15 10:33:07
阅读次数：
93
0、前言 fastjson是阿里出的，尽管近年fasjson爆出过几次严重漏洞，但是平心而论，fastjson的性能的确很有优势，尤其是大数据量时的性能优势，所以fastjson依然是我们的首选；spring boot默认的json解析器是Jackson，替换为fastjson很有必要； 1、替换方 ...
分类：
编程语言 时间：
2019-12-08 12:53:21
阅读次数：
92
1.功能测试 对产品的功能进行测试，检验是否实现、是否正确实现系统功能。 2.性能测试 对产品的性能进行测试，检验是否达标、是否能够保持性能。 3.负载测试 在认为设置的高负载（大数据量、大访问量）的情况下，检查系统是否发生功能或者性能上的问题。 4.压力测试 在人为设置的系统资源紧缺情况下，检查系 ...
分类：
其他好文 时间：
2019-11-27 19:01:17
阅读次数：
172
1、Flume简介 ? (1) Flume提供一个分布式的，可靠的，对大数据量的日志进行高效收集、聚集、移动的服务，Flume只能在Unix环境下运行。 ? (2) Flume基于流式架构，容错性强，也很灵活简单。 ? (3) Flume、Kafka用来实时进行数据收集，Spark、Flink用来实 ...
分类：
Web程序 时间：
2019-11-22 12:11:59
阅读次数：
201
一、背景mysql 表中已有 4 亿数据，为提高查询效率，需创建分区，一开始计划是创建 HASH 分区，结果报错：ERROR 1659 (HY000): Field 'partno' is of a not allowed type for this type of partitioning1 查询 ...
分类：
数据库 时间：
2019-11-21 09:32:52
阅读次数：
151
小波级数：CWT的离散化（一） 如今，人们大量使用计算机来完成大数据量的运算。显然，无论是傅立叶变换(FT)，短时傅立叶变换(STFT)还是连续小波变换(CWT)，都能用解析式、积分等方式来计算。于是在用计算机实现的过程中就会遇到离散化的问题。如果FT与STFT一样，最直观的做法是直接在时-频平面上 ...
分类：
其他好文 时间：
2019-11-16 17:59:06
阅读次数：
78
转自：https://blog.csdn.net/xinxin920606/article/details/86592490 1、对内容超长以省略号代替的，鼠标hover后忘记添加完整内容tips测试：输入超长内容，查看tips完整提示2、页面实际展示的字体大小和文案位置等往往与产品要求的不一致。测 ...
分类：
Web程序 时间：
2019-11-05 21:45:08
阅读次数：
123
