一、背景介绍ELK不是一款软件，而是Elasticsearch、Logstash和Kibana三种软件产品的首字母缩写。这三者都是开源软件，通常配合使用，而且又先后归于Elastic.co公司名下，所以被简称为ELKStack。根据GoogleTrend的信息显示，ELKStack已经成为目前最流行的集中式日志解决方案。Elasticsearch：分布式搜索和分析引擎，具有高可伸缩、高可靠和易管理
分类：
其他好文 时间：
2019-12-10 00:33:33
阅读次数：
116
开始之前，先参考我之前的文章，Ceph对象存储介绍与安装，https://blog.51cto.com/11093860/2456570Ceph对象网关将存储区索引数据存储在index_pool这个池中，默认值为default.rgw.buckets.index，有时，用户喜欢将多个对象（数十万到数百万个对象）放在一个存储桶中,如果不使用网关管理界面为每个存储桶中的最大对象设置配额，则当用户将大量
分类：
其他好文 时间：
2019-12-09 19:13:40
阅读次数：
309
本次试验es和kibana的版本都是6.6.2（为了防止版本不同出现差异）dockerrun-d--namees-p9201:9200-p9301:9300-e"discovery.type=single-node"docker.elastic.co/elasticsearch/elasticsearch:6.6.2在本机测试es启动是否成功curllocalhost:9201如果出现下列json
分类：
其他好文 时间：
2019-12-09 17:25:04
阅读次数：
108
众所皆知，web上传大文件，一直是一个痛。上传文件大小限制，页面响应时间超时.这些都是web开发所必须直面的。 本文给出的解决方案是：前端实现数据流分片长传，后面接收完毕后合并文件的思路。 实现文件夹上传，要求：服务端保留层级结构，支持10w级别的文件夹上传。 大文件上传及断点续传，要求：支持50G ...
分类：
Web程序 时间：
2019-12-09 13:36:49
阅读次数：
107
这里只写后端的代码，基本的思想就是，前端将文件分片，然后每次访问上传接口的时候，向后端传入参数：当前为第几块文件，和分片总数 下面直接贴代码吧，一些难懂的我大部分都加上注释了： 上传文件实体类： 看得出来，实体类中已经有很多我们需要的功能了，还有实用的属性。如MD5秒传的信息。 首先是文件数据接收逻 ...
分类：
Web程序 时间：
2019-12-09 12:06:40
阅读次数：
119
数据分片 介绍 共享磁盘vs.无共享 分布式数据库系统可分为两大类数据存储架构:(1)共享磁盘和(2)无共享。 Shared Disk Architecture Shared Nothing Architecture 共享磁盘方法在协调对单个中心资源的访问时受到几个固有的体系结构限制。在这样的系统中 ...
分类：
数据库 时间：
2019-12-09 11:55:26
阅读次数：
119
今天去感受了长亭举办的RWCTF现场，参加了技术论坛，也学到了很多的知识 比较有印象的就是 智能安全在Web防护中的探索和实践 阿里云安全防护构建的AI架构体系： 基线检测 基础过滤 异常检测 攻击识别 威胁感知智能体 移花接木：基础协议缺陷导致的DNS缓存污染攻击 DNS缓存污染的具体技术细节： ...
分类：
其他好文 时间：
2019-12-09 01:12:50
阅读次数：
107
一、ES的安装与启动 1、ES安装（Windows环境） 下载地址：https://www.elastic.co/cn/downloads/past-releases#elasticsearch 版本：6.3.2 运行环境：jdk1.8以上 双击.bat启动 2、查看效果 浏览器输入：http:// ...
分类：
其他好文 时间：
2019-12-08 20:15:27
阅读次数：
180
1.查看PostgreSQL表结构和数据信息 2.利用PostgreSQL的row_to_json函数将表结构导出并保存为json格式 此时customer表虽然转储为json格式文件，但是并不能直接导入到elasticsearch，否则会报错如下 根据文档https://www.elastic.c ...
分类：
数据库 时间：
2019-12-08 01:38:29
阅读次数：
125
文章目录： 题目 脚本一及注释 脚本一逻辑 题目： 给出一个 32 位的有符号整数，你需要将这个整数中每位上的数字进行反转。 示例 1: 输入: 123输出: 321 示例 2: 输入: -123输出: -321示例 3: 输入: 120输出: 21注意: 假设我们的环境只能存储得下 32 位的有符 ...
分类：
其他好文 时间：
2019-12-07 21:20:18
阅读次数：
101
