MongoDB是啥? 简单来说:MongoDB是一种非关系型数据库(NoSQL)。 进一步来说:MongoDB是一个介于关系数据库和非关系数据库之间的产品,是非关系数据库当中功能最丰富,最像关系数据库的。它支持的数据结构非常松散,是类似json的bson格式,因此可以存储比较复杂的数据类型。Mong ...
分类:
数据库 时间:
2020-08-02 19:59:09
阅读次数:
116
开源SpringBoot中Mongodb多数据源扩展框架原创尹吉欢猿天地2019-04-25在日常工作中,我们通过SpringDataMongodb来操作Mongodb数据库,在SpringBoot中只需要引入spring-boot-starter-data-mongodb即可。然后配置连接信息如下:1.spring.data.mongodb.uri=mongodb://localhost:270
分类:
数据库 时间:
2020-08-02 10:03:41
阅读次数:
86
关于这个功能,esl-client 上给出的源码示例极具误导性,根本跑不起来,见: https://github.com/esl-client/esl-client/blob/master/src/test/java/OutboundTest.java 正确姿势:必须在事件订阅的回调里,才能拿到用户 ...
分类:
其他好文 时间:
2020-08-01 21:24:14
阅读次数:
105
git:分布式版本控制系统 1.版本控制系统 开发中我们把每一次的修改都有效的进行记录(记录成一个版本),后期如果需要回退到原有的某个版本或者是用当前的和某一个版本进行比较等,都可以有效的进行管理 常用的版本控制系统:SVN(集中式) 、git(分布式) 2.分布式版本管理系统的特点 3.Linux ...
分类:
其他好文 时间:
2020-08-01 12:46:17
阅读次数:
105
爬虫介绍 # 介绍爬虫 2 urilib3(内置,不好用),requests--模拟发送http请求 3 Beautifulsoup解析,xpth解析 4 selenium模块,操作浏览器 5 Mongodb 6 反爬:代理池,cookie池,请求头中:user-agent,refer,js逆向 7 ...
分类:
其他好文 时间:
2020-07-31 21:46:31
阅读次数:
87
yuminstall-yzsh#安装zshsh-c"$(curl-fsSLhttps://raw.githubusercontent.com/robbyrussell/oh-my-zsh/master/tools/install.sh)"#安装ohmyzshorsh-c"$(wgethttps://raw.githubusercontent.com/robbyrussell/oh-my-zsh/m
分类:
其他好文 时间:
2020-07-31 19:20:37
阅读次数:
76
k8s集群分为三个部分。如下图所示 1. master节点 2. node节点 3. etcd存储 部署master.com节点 根据上图所示,master节点分为三个组件(apiserver、controller-manager、scheduler) apiserver:k8s集群的总入口,基于h ...
分类:
其他好文 时间:
2020-07-31 19:16:40
阅读次数:
61
1、问题引出来自星球同学的提问:“Ingestnode什么场景会遇到它?一直没搜到它是在什么场景工作的?”的确我们比较关心集群的节点角色的划分。包括:集群应该几个节点?几个节点用于数据存储?要不要独立Master节点、协调节点?但是Ingestnode的场景用的比较少。2、集群节点角色划分梳理之前的文章:刨根问底|Elasticsearch5.X集群多节点角色配置深入详解有过解读。本文再参考7.1
分类:
其他好文 时间:
2020-07-31 01:02:01
阅读次数:
188
Hbase在hdfs上的存储位置,根目录是由配置项hbase.rootdir决定,默认就是"/hbase" 其中hbase master 的webui 由参数hbase.master.info.port决定,一般配置为 60010 [dip@g3-test-36 ~]$ hadoop fs -ls ...
分类:
其他好文 时间:
2020-07-30 19:45:37
阅读次数:
104
复制步骤: Slave 上面的IO线程连接上 Master,并请求从指定日志文件的指定位置(或者从最开始的日志)之后的日志内容 Master 接收到来自 Slave 的 IO 线程的请求后,通过负责复制的 IO 线程根据请求信息读取指定日志指定位置之后的日志信息,返回给 Slave 端的 IO 线程 ...
分类:
数据库 时间:
2020-07-30 18:24:18
阅读次数:
84