1 kafka概述 什么是Kafka 在流式计算中，Kafka一般用来缓存数据，Storm通过消费Kafka的数据进行计算。 1）Apache Kafka是一个开源消息系统，由Scala写成。是由Apache软件基金会开发的一个开源消息系统项目。 2）Kafka最初是由LinkedIn公司开发，并于 ...
分类：
其他好文 时间：
2021-06-20 17:36:06
阅读次数：
0
1. MongoDB相关概念 1.1 业务应用场景 传统的关系型数据库（如MySQL），在数据操作的“三高”需求以及应对Web2.0的网站需求面前，显得力不从心。 解释：“三高”需求： High performance - 对数据库高并发读写的需求。 Huge Storage - 对海量数据的高效率 ...
分类：
数据库 时间：
2021-06-20 17:35:12
阅读次数：
0
/* */为了方便调试Qt程序，也方便传输文件，需要用sftp功能，开发板的dropbear没有此功能所以需要自己编译sftp-server程序，复制到开发板中运行。 sftp-server是openssh的一部分，所以要编译openssh。openssh依赖zlib和OpenSSL，所以也要编译z ...
分类：
其他好文 时间：
2021-06-19 19:29:49
阅读次数：
0
原理模型 准备工作 查看是否安装成功 查看 keepalived配置文件 查看keepalived.conf配置文件 //查看服务器网卡 检测脚本配置 ...
分类：
其他好文 时间：
2021-06-19 19:23:54
阅读次数：
0
[client]port = 3306socket = /tmp/mysql.sock [mysqld] ###############################基础设置##################################### #Mysql服务的唯一编号 每个mysql服务I ...
分类：
数据库 时间：
2021-06-19 19:21:13
阅读次数：
0
感谢搜索引擎，踩坑无数最终还是Mission Complete。 由于种种原因，我需要配置远程服务器，在上面安装向日葵远程桌面。 一、连接服务器 win10已经带有OpenSSH客户端（在应用-可选功能中确认），以管理员身份运行powershell，使用以下命令即可连接到远程服务器。 ssh use ...
分类：
其他好文 时间：
2021-06-19 19:19:03
阅读次数：
0
所谓主主复制，即双主备份，或者叫互作主从复制，每台master既是master，又是slave。这种方案，既做到了访问量的压力分流，同时也解决了**单点故障**问题。 ...
分类：
数据库 时间：
2021-06-19 18:50:14
阅读次数：
0
恢复内容开始 1、备份数据 操作服务器：主数据库 #备份mysql中所有数据库数据./mysqldump -h主数据库ip -uroot -p -P3308 --all-databases > /data0/all_db.sql 2、停库 操作服务器：主备数据库均操作 systemctl stop ...
分类：
数据库 时间：
2021-06-18 20:00:25
阅读次数：
0
key 分布不均匀 业务数据本身的欠缺性 建表设计方法不对 有些 SQL 难免会有一下数据倾斜不可避免 表现的形式： 任务完成进度卡死在99%，或者进度完成度在100%但是查看任务监控，发现还是有少量（1个或几个）reduce 子任务未完成。因为其处理的数据量和其他 reduce 差异过大。单一re ...
分类：
其他好文 时间：
2021-06-18 19:56:57
阅读次数：
0
方法1: 直接使用数据库提供的SQL语句 语句样式: MySQL中,可用如下方法: SELECT * FROM 表名称 LIMIT M,N 适应场景: 适用于数据量较少的情况(元组百/千级) 原因/缺点: 全表扫描,速度会很慢 且 有的数据库结果集返回不稳定(如某次返回1,2,3,另外的一次返回2, ...
分类：
数据库 时间：
2021-06-18 19:51:23
阅读次数：
0
