雪花算法解决的问题： 全局唯一，聚集索引，递增趋势，高可用高性能，信息安全； GUID 不能满足上面需求； 雪花算法设计思路：64位，可满足分布式环境下唯一性，递增性，聚集索引，信息安全（从id上不能看到订单的信息） 根据区域划分的ID :如Aid：1 10亿Bid：10亿--20亿Cid：20亿- ...
分类：
编程语言 时间：
2021-03-08 13:52:13
阅读次数：
0
docker swarm 环境准备 在本地搭建3台虚拟机1C2G，用于swarm集群。 ip地址 192.168.1.10，192.168.1.11，192.168.1.12. 配置yum源使用阿里云，使用xshell发送到所有session功能，一次操作3台机器 安装docker #配置yum源使 ...
分类：
其他好文 时间：
2021-03-08 13:33:34
阅读次数：
0
Apache Cassandra中num_tokens的默认值在4.0版本中将会有变化！这看起来好像只是在CHANGES.txt文件中做了个小小的改动，但实际上这个改动将会对集群的日常运维有着深远的影响。 在这篇文章中，我们将会来仔细讨论num_tokens值的改变将会如何影响集群极其运行情况。 A ...
分类：
Web程序 时间：
2021-03-08 13:11:55
阅读次数：
0
hadoop大数据集群搭建过程中，需要使用到zookeeper进行主从管理和控制，那我们就安装一套集群环境 1、下载zookeeper 登录zookeeper.apache.org官网，找到Getting Started下边的Download。 进去之后我们选择一个版本，比如选择3.6.2，进去后选 ...
分类：
其他好文 时间：
2021-03-06 14:45:39
阅读次数：
0
杀死进程 $HADOOP_HOME/sbin/stop-yarn.sh $HADOOP_HOME/sbin/stop-dfs.sh 删除所有节点 hadoop 根目录下的 data 和 logs rm -rf data/ logs/ 格式化 在 hadoop 根目录下执行 hdfs namenode ...
分类：
其他好文 时间：
2021-03-06 14:35:10
阅读次数：
0
1、在/root/bin目录创建脚本xcall.sh 2、脚本本周编写内容 [root@wd ~]# vi xcall.sh !/bin/bash for i in wd.idc.com wd2 wd1 do echo $i ssh $i "$*" done 3、修改脚本执行权限 [root@wd ...
分类：
其他好文 时间：
2021-03-05 12:59:52
阅读次数：
0
简介： 快手基于 Flink 的持续优化与实践的介绍。 一、Flink 稳定性持续优化 第一部分是 Flink 稳定性的持续优化。该部分包括两个方面，第一个方面，主要介绍快手在 Flink Kafka Connector 方面做的一些高可用，是基于内部的双机房读或双机房写和一些容错的策略。第二部分关 ...
分类：
其他好文 时间：
2021-03-05 12:54:40
阅读次数：
0
事情起因： 最近TKE集群的RBAC对象级权限控制功能已经全量上线了，新的RBAC模式下kubeconfig不再提供集群的token，都是通过证书进行认证，具体变化和使用可以参考文档https://cloud.tencent.com/document/product/457/46104。 然后我们公 ...
分类：
其他好文 时间：
2021-03-04 13:32:08
阅读次数：
0
Application Application=a driver program + executors 一般来说：1个SparkContext = 1个application=1个SparkShell Spark提交任务不一定须在集群里提交，有gateway就行 1个application ==> ...
分类：
系统相关 时间：
2021-03-04 13:20:14
阅读次数：
0
MySQL复制 （1）扩展方式： Scale Up ，Scale Out （2）MySQL的扩展 读写分离 复制：每个节点都有相同的数据集 向外扩展 二进制日志 单向 （3）复制的功用： 数据分布 负载均衡读 备份 高可用和故障切换 MySQL升级测试 一主多从 主从复制介绍 两台或两台以上实例，通 ...
分类：
数据库 时间：
2021-03-04 13:19:58
阅读次数：
0
