1.1.1 输入分片和记录 （1）输入分片InputSplit接口 输入分片一般是文件，也可以数据库中的若干行。记录对应一行数据。输入分片在java表示为InputSplit接口，getlength函数返回大小，用于分片排序，大的先处理。Getlocation函数返回分片位置，让map任务尽量本地化 ...
分类：
其他好文 时间：
2020-02-03 11:30:47
阅读次数：
69
1、写出自己寒假前3周的具体技术学习收获，所花时间及完成代码量：在python方面，目前已学习到列表和元组，具体了解到数据类型，运算符，运算符优先级，序列索引，分片，序列相加，长度，最大值和最小值。列表中元素赋值，增删元素，嵌套列表，及具体方法：list.append(末尾加新对象)，count(统 ...
分类：
其他好文 时间：
2020-02-02 20:00:03
阅读次数：
76
前提条件 不是所有的字段类型都能排序，只有下面两种类型可以 1.数字 2.日期 排序查询 sort 1.降序 desc GET zhifou/doc/_search { "query": { "match": { "from": "gu" } }, "sort": [ { "age": { "ord ...
分类：
编程语言 时间：
2020-02-02 19:18:11
阅读次数：
189
数据传递： 一旦WebSocket客户端、服务端建立连接后，后续的操作都是基于数据帧的传递。 WebSocket根据opcode来区分操作的类型。比如0x8表示断开连接，0x0-0x2表示数据交互。 1、数据分片 WebSocket的每条消息可能被切分成多个数据帧。当WebSocket的接收方收到一 ...
分类：
Web程序 时间：
2020-02-01 16:28:33
阅读次数：
109
文章索引: elasticsearch && filebeat "delete old data in elasticsearch" "centos6下filebeat多开问题 " zabbix "zabbix server优化与迁移 " python && django "python datet ...
分类：
其他好文 时间：
2020-01-31 17:24:20
阅读次数：
65
ELK版本：elasticsearch-5.2.2 kibana-5.2.2 logstash-2.4.1 all plugins 部署环境为单台服务器，未配置集群 一、官网下载地址：https://www.elastic.co/downloads 二、elasticsearch安装 1、由于安装E ...
分类：
其他好文 时间：
2020-01-31 00:40:19
阅读次数：
87
列表 列表是Python中最基本也是最常用的数据结构之一。列表中的每个元素都被分配一个数字作为索引，用来表示该元素在列表内所排在的位置。第一个元素的索引是0，第二个索引是1，依此类推。 Python的列表是一个有序可重复的元素集合，可嵌套、迭代、修改、分片、追加、删除，成员判断。 从数据结构角度看， ...
分类：
编程语言 时间：
2020-01-30 21:23:00
阅读次数：
118
高级操作 讲解关于mongodb的高级操作，包括聚合、主从复制、分片、备份与恢复、MR 完成python与mongodb的交互 2.1、聚合 aggregate 聚合(aggregate)主要用于计算数据，类似sql中的sum()、avg() 语法 db.集合名称.aggregate([{管道:{表 ...
分类：
数据库 时间：
2020-01-29 10:59:28
阅读次数：
116
Sharding Jdbc 源码分析 [toc] __Apache Sharding Sphere 系列目录()__ 在看 Sharding Jdbc 源码之前，强烈建议先阅读一直官网的文章： 1. "Apache Sharding Jdbc 数据分片" JDBC 调用过程如下：APP ORM JD ...
分类：
数据库 时间：
2020-01-26 19:11:42
阅读次数：
160
Elasticsearch 版本：6.4.0 一、疑问 在项目中后期，如果想调整索引的 Mapping 结构，比如将 ik_smart 修改为 ik_max_word 或者 增加分片数量 等，但 Elasticsearch 不允许这样修改呀，怎么办？ 常规 解决方法： <! more 根据最新的 M ...
分类：
移动开发 时间：
2020-01-26 15:51:50
阅读次数：
71
