1.基于Receiver的方式 这种方式使用Receiver来接收kafka中的数据，Receiver是基于kafka的高层Consumer API来实现的。Receiver从Kafka中获取的数据都是存储在Spark Executor的内存中的，然后Spark Streaming启动的job会去处 ...
分类：
其他好文 时间：
2020-06-15 22:58:10
阅读次数：
60
OpenMediaVault是一个NAS存储系统的开源解决方案，通过网络协议（如TCP/IP）和应用程序（如网络文件系统NFS或者通用Internet文件系统CIFS）来进行文件访问，其功能比肩于群晖 DSM 、威联通 QTS、万由 U-NAS OS、FreeNAS、Windows系的存储服务器、Linux Distribution系的存储服务器、Nas4Free或XigmaNAS等
分类：
其他好文 时间：
2020-06-15 15:46:48
阅读次数：
307
模板机，交换机，lan区段，read 2. ssh scp rsync的三种传输方式 rsync+cron 3. rsync+inotify NFS 4. rsync和NFS排错 sersync 5. ssh telnet 环境变量与命令 ifconfig、ifup、ifdown ssh免密登录 跳 ...
分类：
其他好文 时间：
2020-06-14 01:22:53
阅读次数：
84
环境 主机名 安装服务 wan lan db01 mariadb 10.0.0.51 172.16.1.51 流程分析 1.安装ansible 2.优化ansible 3.推送公钥 4.开启防火墙 5.开启80 443 873 nfs等端口和服务白名单 6.关闭selinux 7.创建同一的用户 1 ...
分类：
数据库 时间：
2020-06-14 01:09:54
阅读次数：
112
GlusterFS简介GlusterFS(GNUClusterFileSystem)是一种全对称的开源分布式文件系统，所谓全对称是指GlusterFS采用弹性哈希算法，没有中心节点，所有节点全部平等。GlusterFS配置方便，稳定性好，可轻松达到PB级容量，数千个节点。GlusterFS重要概念birck：GlusterFS的基本元素，以节点服务器目录形式展现；volume：多个brick的逻辑
分类：
其他好文 时间：
2020-06-11 09:16:39
阅读次数：
76
NFS优势： 实现数据统一，节省磁盘资源，节省带宽 主要存放：用户上传图片，视频附件等信息 NFS共享存储工作原理 1 在NFS服务端创建共享存储目录与挂载点 2 在NFS客户端创建远程目录挂载点（需要与服务端一致） 3 在NFS客户端进行远程挂载 RPC服务简介（房屋中介） 默认端口：111 与N ...
分类：
Web程序 时间：
2020-06-10 11:35:44
阅读次数：
82
部署在kubernetes中，以NFS作为数据存储卷 环境介绍： 名称 版本 K8S v1.17.2 Docker 19.03.5 nacos 1.3.0 一、拉取代码 git clone https://github.com/nacos-group/nacos-k8s.git 二、安装NFS服务 ...
分类：
Web程序 时间：
2020-06-08 20:38:50
阅读次数：
199
1. 元组 a. 定义和下标访问 元组的格式: (值,....) 如 s = (1,2,3) 元组的类型: tuple 元组的下标使用同字符串 注意:如果元组中只有一个元素,那么在定义时,需要加一个逗号 如：s = (4,) b. 遍历 # for-in t = (1,2,3,4,5,'hello' ...
分类：
编程语言 时间：
2020-06-08 14:32:12
阅读次数：
78
目录 （1）单块架构 （2）初步的高可用架构 （3）千万级用户量的压力预估 （4）服务器压力预估 （5）业务垂直拆分 （6）用分布式缓存抗下读请求 （7）基于数据库主从架构做读写分离 （8）总结 本文将会从一个大型的网站发展历程出发，一步一步的探索这个网站的架构是如何从单体架构，演化到分布式架构，然 ...
分类：
Web程序 时间：
2020-06-08 12:17:33
阅读次数：
89
1. 什么是FastDFS FastDFS 是用 c 语言编写的一款开源的分布式文件系统。FastDFS 为互联网量身定制， 充分考虑了冗余备份、负载均衡、线性扩容等机制，并注重高可用、高性能等指标，使用 FastDFS 很容易搭建一套高性能的文件服务器集群提供文件上传、下载等服务。 FastDFS ...
分类：
其他好文 时间：
2020-06-07 21:50:09
阅读次数：
81
