关于mongodb的高级操作，包括聚合、主从复制、分片、备份与恢复、MR。 一、聚合 aggregate聚合(aggregate)主要用于计算数据，类似sql中的sum()、avg() 语法： db.集合名称.aggregate([{管道:{表达式}}]) 管道：管道在Unix和Linux中一般用于 ...
分类：
数据库 时间：
2021-04-14 12:40:50
阅读次数：
0
主节点配置 主机配置文件 主要配置有以下 server-id=1 #服务器id (主从必须不一样) log-bin=mysql-bin # 打开日志(主机需要打开)，这个mysql-bin 可自定义，也可加上路径 binlog-do-db=dblog #要给从机同步的库 binlog-ignore- ...
分类：
数据库 时间：
2021-04-12 12:14:45
阅读次数：
0
主从集群 在搭建主从集群前，我们先把Redis安装起来： #解压Redis压缩包 [root@master lf]# tar -zxvf redis-6.2.1.tar.gz …… #安装gcc [root@master redis-6.2.1]# yum install gcc …… [root@ ...
分类：
其他好文 时间：
2021-04-12 12:08:05
阅读次数：
0
0、准备 这里使用2台机器做测试 userver01 master userver02 slave 以上2台机器都安装了redis 1、设置从节点的配置项目 再userver02 这台机器上的配置文件中，修改slaveof的值： sudo vim /etc/redis/6379.conf 再配置文件 ...
分类：
其他好文 时间：
2021-04-10 13:26:36
阅读次数：
0
爬取的数据一般需要提交给数据库，这里就介绍了三个主流数据库的连接(mysql,redis,mongodb),如果你的数据库服务器都放在liunx系统上首先要修改一下配置文件将bind 127.0.0.1修改为bind 0.0.0.0这样才能访问数据库。并且需要查看linux防火墙设置。如果开启要将其 ...
分类：
数据库 时间：
2021-04-10 13:21:40
阅读次数：
0
学习过得技术 HDFS YARN MR HIVE HBASE SPARK SPARK(sparkCore、sparkSql、sparkStreaming) HDFS 数据库管理、 存磁盘 Ha模式(在zookeeper之上) 联邦机制(把大象装进冰箱) split切片 Hbase 列式数据库 半结构 ...
分类：
其他好文 时间：
2021-04-05 12:37:34
阅读次数：
0
一，主从复制 概念： 主从复制，是指将一台Redis服务器的数据，复制到其他的Redis服务器。前者称为主节点（master/leader）,后者称为从节点（slave/follower）;数据的复制是单向的，只能由主节点到从节点，Master以写操作为主，Slave以读为主； 默认情况下，每台Re ...
分类：
其他好文 时间：
2021-04-02 12:53:09
阅读次数：
0
作者个人研发的在高并发场景下，提供的简单、稳定、可扩展的延迟消息队列框架，具有精准的定时任务和延迟队列处理功能。自开源半年多以来，已成功为十几家中小型企业提供了精准定时调度方案，经受住了生产环境的考验。为使更多童鞋受益，现给出开源框架地址： https://github.com/sunshinely ...
分类：
数据库 时间：
2021-03-31 12:03:26
阅读次数：
0
redis支持数据持久化，可以将内存中的数据保存在磁盘中，重启的时候可以再次加载使用。 redis不仅支持key-value类型，还提供list、set、zset、hash等数据结构。memcache只支持key-value类型 redis支持数据备份，即主从多副本模式 redis的数据比memca ...
分类：
系统相关 时间：
2021-03-31 11:41:59
阅读次数：
0
SpringBoot集成Redis；分别实现Redis单机模式、Redis主从复制、Redis哨兵模式、Redis-Cluster模式在SpringBoot中的集成实现。 ...
分类：
编程语言 时间：
2021-03-30 13:34:21
阅读次数：
0
