一、FastDFS基本概念及基本原理1.什么是FastDFS FastDFS是用C语言编写的一款开源的分布式文件系统。FastDFS为互联网量身定制,充分考虑了冗余备份、负载均衡、线性扩容等机制,并注重高可用、高性能等指标,使用FastDFS很容易搭建一套高性能的文件服务器集群提供文件上传、下载等服务。主要功能包括文件存储、文件同步、文件访问(上传、下载)、存取负载均衡、在线扩容、相同内容只存储
分类:
其他好文 时间:
2020-12-10 11:04:10
阅读次数:
3
一、背景 上篇文章我们介绍了如何在centos7下面进行安装单机版redis以及redis集群。这篇文章,我们来聊一聊如何使用java客户端来进行操作redis。我们知道redis的java客户端有很多,如:jedis、redission等。这篇文章着重介绍我们平常使用最多的redis的java客户端jedis。二、通过单元测试来小试牛刀 1.首先在maven的pom.xml中引入jedis-
分类:
编程语言 时间:
2020-12-10 11:03:10
阅读次数:
3
一、背景 因项目需要,要引入redis做缓存,就在centos7下亲自安装了一遍redis,刚好趁着这个机会就来把redis的概念以及单机版和集群版redis安装步骤记录下来,在此和大家一起分享。二、Redis介绍1.什么是Redis? Redis是用C语言开发的一个开源的高性能键值对(key-value)数据库。它通过提供多种键值数据类型来适应不同场景下的存储需求,目前为止Redis支持的键
分类:
其他好文 时间:
2020-12-10 11:02:35
阅读次数:
6
一、背景 当我们使用了nginx做项目集群以后,就会出现一个很严重的问题亟待解决,那就是:tomcat集群之间如何实现session共享的问题,如果这个问题不解决,就会出现登陆过后再次请求资源依旧需要登陆的问题。这篇文章我们就解决这个问题。二、实现步骤说明:本篇是在spring+shiro集成的基础上进行改进的,如果不知道spring和shiro怎么集成,请移步:spring集成shiro做登陆
分类:
其他好文 时间:
2020-12-10 10:54:14
阅读次数:
2
直奔主题,只讲干货?解压缩三个elasticsearch包如果子目录data下有数据,删掉,不然会有坑:比如新增节点加入不到集群里?2.修改三个elasticsearch目录下的config文件elasticsearch.yml,添加三个字段cluster.name:es-clusternode.name:esnode-1cluster.initial_master_nodes
分类:
其他好文 时间:
2020-12-10 10:33:04
阅读次数:
1
一文带你掌握K8S [ Kubernetes ] K8S的简单概述 K8S是谷歌在2014年开源的容器集群化管理系统,听说谷歌内部已经使用10余年(然后还是别人的一个阉割版本,哈哈哈哈,这或许就是技术公司的实力吧) 我们使用K8S主要是进行容器化应用的部署,至于K8S有什么作用我们下文详细说明,反正 ...
分类:
Web程序 时间:
2020-12-09 12:15:31
阅读次数:
8
使用DockerSwarm搭建分布式爬虫集群在爬虫开发过程中,你肯定遇到过需要把爬虫部署在多个服务器上面的情况。此时你是怎么操作的呢?逐一SSH登录每个服务器,使用git拉下代码,然后运行?代码修改了,于是又要一个服务器一个服务器登录上去依次更新?有时候爬虫只需要在一个服务器上面运行,有时候需要在200个服务器上面运行。你是怎么快速切换的呢?一个服务器一个服务器登录上去开关?或者聪明一点,在Red
分类:
其他好文 时间:
2020-12-09 11:53:29
阅读次数:
6
redis cluster在运行时,每个redis实例上都会保存slot和实例的对应关系,为了让集群中的每个实例都知道其他所有实例的状态信息,实例之间会按照 一定的规则进行通信,这个规则就是gossip协议。 Gossip 协议的工作原理:一是,每个实例之间会按照一定的频率,从集群中随机挑选一些实例 ...
分类:
其他好文 时间:
2020-12-09 11:49:48
阅读次数:
3
preference查询选择副本分片的倾向性(即在一个复制组中选择副本的分片值。默认情况下,es以未指定的顺序从可用的碎片副本中进行选择,副本之间的路由将在集群章节更加详细的介绍。可以通过该字段指定分片倾向与选择哪个副本。preference可选值:_primary只在节点上执行,在6.1.0版本后废弃,将在7.x版本移除。_primary_first优先在主节点上执行。在6.1.0版本后废弃,将
大家好,非常抱歉,在昨天下午(12月3日)的访问高峰,园子迎来更高的并发,在这样的高并发下,突发的数据库连接故障造成博客站点全线崩溃,由此给您带来很大的麻烦,请您谅解。最近,我们一边在忙于AWS合作项目,一边在加快产品的改进速度,一边在统一全园UI,一边在忙于解决高并发下出现的各种问题。园子正处于发... ...
分类:
Web程序 时间:
2020-12-08 12:40:18
阅读次数:
10