ELK搭建一、elasticsearch环境安装：node1和node2都装上rpm--importhttps://packages.elastic.co/GPG-KEY-elasticsearch#安装yum源cat>>/etc/yum.repos.d/elaticsearch.repo<<EOF[elasticsearch-2.x]name=Elasticsearchr
分类：
其他好文 时间：
2019-06-09 23:53:04
阅读次数：
140
关闭防火墙和selinux，配置yum源配置21 、22 数据库（这里以21为例）[root@host21 ~]# tar -xf mysql-5.7.17.tar[root@host21 ~]# yum -y install mysql-community-*.rpm[root@host21 ~] ...
分类：
其他好文 时间：
2019-06-09 09:31:06
阅读次数：
84
一，简介 二，自定义分区规则 2.1 普通的分组TopN实现 2.2 自定义分区规则TopN实现 三，RDD的缓存 3.1 RDD缓存简介 3.2 RDD缓存方式 正文 一，简介 在之前的文章中，我们知道RDD的有一个特征：就是一组分片（Partition），即数据集的基本组成单位。对于RDD来说， ...
分类：
其他好文 时间：
2019-06-07 21:22:15
阅读次数：
111
Sharding-Jdbc介绍 Sharding-Jdbc在3.0后改名为Shardingsphere它由Sharding-JDBC、Sharding-Proxy和Sharding-Sidecar（计划中）这3款相互独立的产品组成。他们均提供标准化的数据分片、分布式事务和数据库治理功能，可适用于如J ...
分类：
数据库 时间：
2019-06-05 00:35:51
阅读次数：
134
1、数据链路层对数据帧的长度都有一个限制，也就是链路层所能承受的最大数据长度，这个值称为最大传输单元，即MTU。以以太网为例，这个值通常是1500字节。2、对于IP数据包来讲，也有一个长度，在IP包头中，以16位来描述IP包的长度，也就是说，一个IP包，最长可能是65535字节。3、结合以上两个概念 ...
分类：
Web程序 时间：
2019-06-04 16:06:55
阅读次数：
165
设置分片大小 ES 的每个分片（shard）都是lucene的一个index，而lucene的一个index只能存储20亿个文档，所以一个分片也只能最多存储20亿个文档。 另外，我们也建议一个分片的大小在 10G 50G 之间，太大的话查询时会比较慢，另外在做副本修复的时，耗时比较多；如果有多个并发 ...
分类：
其他好文 时间：
2019-06-03 10:46:18
阅读次数：
1114
一、准备我这边有一个网站放在了GoogleVM上面，所以打算在购买一台服务器安装ELK来处理分析nginx的访问日志。操作系统版本：CentOS7ELK版本：7.11.1、服务器环境准备我们这里还是采用官方的yum源进行安装，简单省事，首先配置官方yum仓库。rpm--importhttps://artifacts.elastic.co/GPG-KEY-elasticsearchcat>&g
分类：
其他好文 时间：
2019-06-01 09:22:29
阅读次数：
296
一、上传elasticsearch-6.2.4.tar.gz到 /usr/local/soft 并解压 二、创建centos用户：elasticsearch不允许以root登录。 三、给用户赋权限：chown leyou:leyou elasticsearch-6.2.4/ -R 四、进入confi ...
分类：
其他好文 时间：
2019-05-31 19:46:25
阅读次数：
90
全文搜索属于最常见的需求，开源的 Elasticsearch （以下简称 Elastic）是目前全文搜索引擎的首选。 它可以快速地储存、搜索和分析海量数据。维基百科、Stack Overflow、Github 都采用它。 Elastic 的底层是开源库 Lucene。但是，你没法直接用 Lucene ...
分类：
其他好文 时间：
2019-05-31 16:47:19
阅读次数：
145
