大数据 概述 大数据是新处理模式才能具备更多的决策力,洞察力,流程优化能力,来适应海量高增长率,多样化的数据资产。 大数据面临的问题 怎么存储海量数据(kb,mb,gb,tb,pb,eb,zb) 怎么对数据进行降噪处理(对数据进行清洗,使得数据变废为宝,提取有用的数据,减少不必要的数据资源空间的释放 ...
分类:
其他好文 时间:
2019-09-21 14:57:06
阅读次数:
97
随着中国的科技研发实力跻身世界先进水平,中国涌现出一批创新能力强在国内国际都拥有强大影响的公司。这里边最突出的就是华为,海思芯片,鸿蒙系统,华为云等产品,随着万物互联时代的到来,产生的数据量将会呈现几何式增长,云计算,大数据,人工智能必将迎来一个新的高潮。但是一个产业的发展从来都不是一家公司可以主导 ...
分类:
其他好文 时间:
2019-09-21 10:44:09
阅读次数:
91
主键、自增、唯一键和三大范式 主键primary key, 加在建表语句中primary key(主键列表),主键对应的字段不允许重复 自增长,在建表语句字段后加auto_increment,这样当对应的字段设置值不给值或给null或直接给默认值时会从表中最大值+1,一个表中只能有一个自增长 唯一键 ...
分类:
其他好文 时间:
2019-09-21 10:43:10
阅读次数:
125
升级过程为:最初系统——添加负载均衡——数据库分库分表+读写分离——缓存集群+消息中间件集群 1、最初系统 假设系统机器是4核8G,数据库服务器是16核32G。日活用户1W,系统层面每秒10次请求,数据库层每秒30次请求。 2、添加负载均衡 用户量增长了50倍,日活用户50万,高峰期对系统每秒请求5 ...
分类:
其他好文 时间:
2019-09-20 23:10:36
阅读次数:
131
什么是rpc 随着企业 IT 服务的不断发展,单台服务器逐渐无法承受用户日益增长的请求压力时,就需要多台服务器联合起来构成「服务集群」共同对外提供服务。 同时业务服务会随着产品需求的增多越来越肿,架构上必须进行服务拆分,一个完整的大型服务会被打散成很多很多独立的小服务,每个小服务会由独立的进程去管理 ...
分类:
编程语言 时间:
2019-09-20 19:09:35
阅读次数:
80
2018年天然气消费量大幅增长,天然气对外依存度不断提高,页岩气将是国产天然气增量重要来源[图] 2019年09月04日 13:46:41字号:T|T http://www.chyxx.com/industry/201908/774792.html 2010-2018 年间,我国天然气表观消费量大幅 ...
分类:
其他好文 时间:
2019-09-17 22:43:50
阅读次数:
132
ArrayList java.util.ArrayList 是大小可变的数组的实现,存储在内的数据称为元素。此类提供一些方法来操作内部存储的元素。 ArrayList 中可不断添加元素,其大小也自动增长。这是和数组之间的区别。需要 import导入使后使用。 基本格式: ArrayList<要存储元 ...
分类:
其他好文 时间:
2019-09-17 12:51:39
阅读次数:
106
贪婪加载顾名思议就是把所有要加载的东西一次性读取。 本节内容为了配合【延时加载】而诞生,贪婪加载和他本该在一起介绍,开发项目的过程中应该双管齐下,才能写出高质量的程序。 Dto 映射查询 这种映射支持单表/多表。 查找规则,查找属性名,会循环内部对象 _tables(join 查询后会增长),以 主 ...
分类:
数据库 时间:
2019-09-17 09:13:27
阅读次数:
133
算法导论 第三章 函数的增长 1.渐近紧确界 渐近记号Θ、Ο、o、Ω、ω详解 链接:https://blog.csdn.net/so_geili/article/details/53353593##目录: 1.渐近紧确界记号:Θ ΘΘ(big-theta)2.渐近上界记号?:O OO(big-oh) ...
分类:
编程语言 时间:
2019-09-14 23:02:32
阅读次数:
101
一、 Hadoop集群动态扩容、缩容 随着公司业务的增长,数据量越来越大,原有的datanode节点的容量已经不能满足存储数据的需求,需要在原有集群基础上动态添加新的数据节点。也就是俗称的动态扩容。 有时候旧的服务器需要进行退役更换,暂停服务,可能就需要在当下的集群中停止某些机器上hadoop的服务 ...
分类:
其他好文 时间:
2019-09-14 19:25:13
阅读次数:
278