分布式中最重要的一个概念：为了解决单个物理服务器容量和性能瓶颈问题而采用的优化手段。 在不同的技术层面，分布式有不同的体现：分布式文件系统、分布式缓存、分布式数据库、分布式计算。一些名词hadoop、zookeeper、MQ等都给分布式有关。 从理念上讲，分布式的实现有两种形式： （1） 水平扩展： ...
分类：
其他好文 时间：
2020-04-29 18:48:00
阅读次数：
70
1.1 当初为什么报”软件工程“|”大数据“ 这个专业？ 因为当初成绩不好，但是计算机编程还可以。 1.2 当初对 XX 专业的期待和想象是什么？ 能在这个专业创造出属于自己的一片新天地。 1.3 当初希望自己是如何投入这个专业的学习的？ 不会的记录下来，不断地去跟进完善自己的错题。 1.4 结合过 ...
分类：
其他好文 时间：
2020-04-28 00:43:53
阅读次数：
59
一、性能测试的目的？ 1、评估当前系统 针对从未做过的性能的系统，进行一系列测试，了解知晓当前系统的性能，并作出相关评估 2、寻找瓶颈，优化性能 常见的现象为，莫业务操作响应时间长、某系统上线运行一段时间后越来越慢，这些都需要逐步分析定位并调优 3、预测未来性能 当用户数和业务量增加时能否及时应对？ ...
分类：
其他好文 时间：
2020-04-27 15:25:12
阅读次数：
73
最近做的一个项目中，ZYNQ本来有两个网口，eth0通过PS端的IO直接引出去，eth1通过PL的EMIO引出去，ARM端软件实现网络的收发。ARM端实现的功能较多，性能遇到瓶颈，此时还需要ARM软件实现网络发送100MBps/s的数据，单单网络发送部分大概就占用了30%的CPU，最大是CPU占用率 ...
分类：
其他好文 时间：
2020-04-26 11:01:40
阅读次数：
134
背景收到nginx的超时报警和服务所在机器的load报警，通过分析问题时间段的系统cpu，内存，网络io，磁盘io使用情况，发现是磁盘io达到瓶颈导致。通过iostat看磁盘的await(平均每次设备I/O操作的等待时间)时间达几百毫秒且util(一秒中有百分之多少的时间用于I/O操作，即被io消耗的cpu百分比)持续100%分析定位问题服务1，通过使用iotop来看系统上使用io最多的进程，发现
分类：
其他好文 时间：
2020-04-23 00:50:14
阅读次数：
181
曾几何时，我总会很庆幸自己进了前端这个行业。因为在这个职业范畴里面，我如鱼得水，成长很快，成就感满满。然而，随着年龄和工龄的增长，渐渐发现自己的瓶颈越来越明显了，我感觉自己似乎碰到了前端的天花板。 原因何在 1.从客观原因来看 前端相对于后端的入门门槛确实低了不少。公司对前端的需求量虽然很旺盛，但是 ...
分类：
其他好文 时间：
2020-04-21 21:14:02
阅读次数：
91
[TOC] 集群简介 业务发展过程中碰到的峰值瓶颈 redis 提供的服务 OPS（操作） 可以达到 10万/秒，当前业务 OPS 已经达到 20万/秒 内存单机容量达到 256G，当前业务需求内存容量 1 T 使用集群方式可以解决上述问题 集群架构 集群就是使用网络将若干台计算机联通起来，并提供统 ...
分类：
其他好文 时间：
2020-04-21 09:14:21
阅读次数：
88
数据库连接池是什么：连接池是一种常用的技术，为什么需要连接池呢？这个需要从TCP说起。假如我们的服务器跟数据库没有部署在同一台机器，那么，服务器每次查询数据库都要先建立连接，一般都是TCP链接，建立连接就需要3次握手了，假设后台服务跟数据库的单程的访问时间需要10ms，那么光是建立连接就花了30ms，并且TCP还有慢启动的机制，实际上一次查询可能还不止1次TCP来回，查询效率就会大大降低。为什么需
分类：
数据库 时间：
2020-04-18 15:37:15
阅读次数：
98
高性能计算（HPC）通过极快的处理速度，获取大量数据进行复杂的运算，实现数据即时分析，达到快速决策的目标。HPC广泛应用于油气勘探、天气分析、基因测序、高校科研、尖端实验室。对于存储系统要求必须足够的性能，保证来自多个HPC服务器密集而多样的分析行为。由于未分析的原始数据会越积越多，并且未来还会有更多的数据需要研究/处理，因此容量和扩展性也是重要的考虑因素。HPC的总体数据最终会达到PB级别，需要
分类：
其他好文 时间：
2020-04-17 15:35:41
阅读次数：
109
一、分布式简介 1、架构简介 现在的互联网，几乎常见的复杂系统都会使用分布式架构，如果在不清楚概念之前，刚接触分布式架构这个名词会感觉十分的高大上，其实在对比单服务，集群服务之后，你就会发现本质上都是一样的。 ：所谓Java架构师，基本就是看被单服务，集群，分布式不断暴打的频率，架构师因为被虐频率高 ...
分类：
其他好文 时间：
2020-04-17 09:50:49
阅读次数：
72
