redis分片机制(shards) 前提说明: redis可以通过修改内存的大小 实现数据的保存.但是内存的资源不易设置的过大,因为很多的时间都浪费在内存的寻址中. 需求: 如果有海量的数据,需要redis存储 问:应该如何处理? 解决方案: 可以采用Redis分片机制 实现内存数据的扩容. 知识点 ...
分类：
其他好文 时间：
2020-08-18 13:55:27
阅读次数：
83
2020 年 天翼杯签到题 题目描述：赛方给出了一个6G的大文件让我们下载，但是速度只有几k，明显不可能靠下载完成获取flag 当时看见这签到提的时候完全不会，毫无头绪，比赛完才看见大佬说需要使用curl分片下载 curl分片下载前提 服务器需要支持 HTTP Range Request，可以用cu ...
分类：
Web程序 时间：
2020-08-17 17:51:06
阅读次数：
141
搜索同一 query，结果ES返回的顺序却不尽相同，可能会有两个原因导致此问题发生： 这就是请求轮询到不同分片，而未设置排序条件，相同相关性评分情况下，是按照所在 segment 中 ?lucene id 来排序的，相同数据的不同备份之间该 id 是不能保证一致的，故造成结果震荡问题。 主节点 和 ...
分类：
其他好文 时间：
2020-08-10 19:51:35
阅读次数：
114
这里只写后端的代码，基本的思想就是，前端将文件分片，然后每次访问上传接口的时候，向后端传入参数：当前为第几块文件，和分片总数 下面直接贴代码吧，一些难懂的我大部分都加上注释了： 上传文件实体类： 看得出来，实体类中已经有很多我们需要的功能了，还有实用的属性。如MD5秒传的信息。 首先是文件数据接收逻 ...
分类：
编程语言 时间：
2020-08-07 18:04:03
阅读次数：
67
环境： 原elasticsearch版本:6.5.0 目的elasticsearch 版本:7.4.0 1.下载logstash 我这里下载的是6.8.5版本 https://artifacts.elastic.co/downloads/logstash/logstash-6.8.5.tar.gz ...
分类：
其他好文 时间：
2020-08-06 20:41:31
阅读次数：
69
上次装的elasticsearch-head-master辅助ElasticSearch可视化工具，虽然使用起来挺方便，但是还是过于简单，并且界面看起来不是很友好。这次要说的是Kibana可视化工具要比elasticsearch-head-master界面友好很多。不多说了，下面就介绍Kibana如 ...
分类：
其他好文 时间：
2020-08-04 16:42:22
阅读次数：
80
1 基本程序结构 Table API 和 SQL 的程序结构，与流式处理的程序结构类似；也可以近似地认为有这么几步：首先创建执行环境，然后定义 source、transform 和 sink。 具体操作流程如下： val tableEnv = ... // 创建表的执行环境 // 创建一张表，用于读 ...
分类：
数据库 时间：
2020-08-04 14:03:48
阅读次数：
83
16年的这个时候，跟着自己的想法开发了一个技术网站，取名为‘猿天地’。寓意是程序猿的天地，开发者的网站。网站域名也是程序猿天地的缩写cxytiandi.com。上线之后就开始了写文章的旅程，以前没有写文章的习惯，这个网站的出现让我养成了坚持写文章，积累工作中遇到问题的习惯。很多时候，不是我们做不到，而是我们不想做，一个字概括就是懒。当你想做一件事，必须得有一个推动你前进的东西，猿天地则成了推动我前
分类：
其他好文 时间：
2020-08-03 23:24:55
阅读次数：
103
SpringCloud构建微服务系统性源码spring-cloud：https://github.com/yinjihuan/spring-cloudSmconf专注于分布式环境下配置的统一管理smconf：https://github.com/yinjihuan/smconfElastic-JobSpringBoot自动集成，只需要一个注解即可发布Job。elastic-job-spring-b
分类：
其他好文 时间：
2020-08-03 23:14:47
阅读次数：
73
1.列表、元组和字符串的共同点 都可以通过索引得到每一个元素 默认索引值总是从0开始 可以通过分片的方法得到一个范围内的元素的集合 有很多共同的操作符（重复操作符、拼接操作符、成员关系操作符） 2.创建序列 >>> list('abcdefg') ['a', 'b', 'c', 'd', 'e', ...
分类：
其他好文 时间：
2020-08-01 21:20:30
阅读次数：
67
