1、大数据对思维方式的重要影响。 现今，互联网井喷式快速发展，我们早已步入信息化社会。海量的信息，使我们值得发掘的宝藏。但是由于我们处理数据能力的不足，人类已经达到瓶颈，直到大数据技术的出现。我们开始通过大数据来辅助决策，人类理性的范围将会扩大，决策的质量就能提高，也带给思维方式巨大的改变。 首先， ...
分类：
其他好文 时间：
2018-03-06 21:38:45
阅读次数：
111
可以看日志 mr日志 可以看执行计划 分析数据倾斜，性能瓶颈的利器啊 可以看表结构 ...
分类：
其他好文 时间：
2018-03-06 16:59:09
阅读次数：
125
调优的目的是突破性能瓶颈。性能监测的目的是测试瓶颈在哪里。不同的硬件，不同的系统，不同的应用，优化的重点/参数/方法都是不一样的。 对于mysql而言，调优也要从这三方面入手：硬件/系统/mysql应用。 1 硬件基础 1.1 cpu-NUMA架构 在NUMA出现之前，cpu的所有core共享一个北 ...
分类：
数据库 时间：
2018-03-06 00:59:50
阅读次数：
177
计算机和网络技术的高速发展对存储性能和数据可靠性的要求不断提高。在企业环境中，当公司服务器同时有3000+的用户同时访问时，并且用户同时进行不同的文件读写的操作时，单个硬盘的读写性能有限，容易出现性能瓶颈。常见的并行接口硬盘中如早期的IDE硬盘最高只到达133Mbps，SCSI小型计算机系统接口硬盘的最高传输速率是320Mbps，目前主流的串行接口硬盘SATA接口硬盘中SATA1传输速率是300M
分类：
系统相关 时间：
2018-03-05 11:16:29
阅读次数：
220
一、试述大数据对思维方式的重要影响。 大数据（big data），指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。 当今，互联网井喷式快速发展，我们早已步入信息化社会。信息并不匮乏， ...
分类：
其他好文 时间：
2018-03-05 11:10:15
阅读次数：
202
性能测试的目的： 评价系统当前性能，判断系统是否满足预期的性能需求。 寻找软件系统可能存在的性能问题，定位性能瓶颈并解决问题。 判定软件系统的性能表现，预见系统负载压力承受力，在应用部署之前，评估系统性能。 对于用户来说，则最关注的是当前系统： 是否满足上线性能要求？ 系统极限承载如何？ 系统稳定性 ...
分类：
其他好文 时间：
2018-03-04 19:05:27
阅读次数：
132
1 入门概述 1.1 互联网背景下大机遇，为什么用NOSQL？ 1.1.1 单机MySQL的美好时代 在90年代，一个网站的访问量一般都是不大的，用单个数据库完全可以轻松应付。 在那个时候，更多的是静态网页，动态交互类型的网站不多。 在上述的架构上，我们来看看数据存储的瓶颈是什么？ 1）数据量的总大 ...
分类：
数据库 时间：
2018-03-04 00:25:25
阅读次数：
302
恢复内容开始 第1章 秒杀系统高并发优化分析 1.为什么要单独获得系统时间 访问cdn这些静态资源不用请求系统服务器 而CDN上没有系统时间，需要单独获取，获取系统时间不用优化，只是new了一个日期对象返回，java访问一次内存（cacheline）的时间大概为10ns，即一秒可可访问一亿次 倒计时 ...
分类：
编程语言 时间：
2018-03-03 20:30:10
阅读次数：
236
经历一两年的node后端开发，熟悉了node原生api、常用包、数据库操作语句、一两个框架等，技术会达到一个瓶颈。如果没有足够的动力去深入，很容易老死在这个瓶颈上。 下面总结一下，提升点和方向： ...
分类：
Web程序 时间：
2018-03-03 16:54:39
阅读次数：
157
1 单元测试 (1) 单元测试 (2) 回归测试 回退操作 2 效能分析工具 先用抽样的方法找到效能瓶颈所在，然后对特定的模块用代码注入的方法进行详细分析 3 个人开发流程 (1) 计划 明确需求和其他相关因素，指明时间成本和依赖关系 分析需求 生成设计文档 设计复审（和同事审核设计文档） 代码规范 ...
分类：
其他好文 时间：
2018-03-03 15:37:03
阅读次数：
156
