爬取的数据一般需要提交给数据库,这里就介绍了三个主流数据库的连接(mysql,redis,mongodb),如果你的数据库服务器都放在liunx系统上首先要修改一下配置文件将bind 127.0.0.1修改为bind 0.0.0.0这样才能访问数据库。并且需要查看linux防火墙设置。如果开启要将其 ...
分类:
数据库 时间:
2021-04-10 13:21:40
阅读次数:
0
1)ReentrantReadWriteLock的使用 2)应用ReentrantReadWriteLock解决缓存一致性问题。 ...
分类:
其他好文 时间:
2021-04-10 13:10:54
阅读次数:
0
Docker部署kafka集群 利用docker可以很方便的在一台机子上搭建kafka集群并进行测试。为了简化配置流程,采用docker-compose进行进行搭建。 kafka搭建过程如下: 编写docker-compose.yml文件,内容如下: version: '3.3' services: ...
分类:
其他好文 时间:
2021-04-10 12:51:06
阅读次数:
0
解决方式:把图标缓存的数据库删除 一、 第一步:win+r cmd进入命令行 第二步:一行一行键入如下命令 taskkill /im explorer.exe /f cd /d %userprofile%\appdata\local del iconcache.db /a start explore ...
分类:
其他好文 时间:
2021-04-09 13:41:00
阅读次数:
0
DNS解析过程 当浏览器输入www.baidu.com 后。 首先会去浏览器的dns缓存中查询是否有对应记录。 如果浏览器缓存中没有,再去查询操作系统的缓存,(进入cmd命令行 输入 ipconfig/displaydns)。 如果操作系统缓存中也没有,再去查看本地dns服务,本地dns服务器IP地 ...
分类:
其他好文 时间:
2021-04-09 13:29:04
阅读次数:
0
noeviction:返回错误当内存限制达到并且客户端尝试执行会让更多内存被使用的命令(大部分的写入指令,但DEL和几个例外) allkeys-lru:尝试回收最少使用的键(LRU),使得新添加的数据有空间存放。 volatile-lru:尝试回收最少使用的键(LRU),但仅限于在过期集合的键,使得 ...
分类:
其他好文 时间:
2021-04-09 13:08:22
阅读次数:
0
【1】多个资源请求 (1.1)基本查多个索引 您可以使用逗号分隔的列表对多个资源 test1,test2,test3 (1.2)通配符,like 之类的模糊查询 还可以使用通配符 * ,如: test*或*test或te*t或*test*。 您可以使用以下-字符排除目标:test*,-test3。 ...
1.celery介绍 pip install celery == 4.4.7 pip install redis == 3.5.3 pip install eventlet == 0.26.1 Celery 是一个 基于python开发的分布式异步消息任务队列,通过它可以轻松的实现任务的异步处理, ...
分类:
其他好文 时间:
2021-04-08 13:57:36
阅读次数:
0
zkCli.sh ls / 记住zk的根目录下内容 ls或者get /kafka/cluster/id 查看zk下的kafuka controller ls /kafka/brokers/ kafka目录下 config查看配置:server.properties broker.id=0 liste ...
分类:
其他好文 时间:
2021-04-08 13:49:09
阅读次数:
0
Redis 中 BitMap 的使用场景 BitMap BitMap 原本的含义是用一个比特位来映射某个元素的状态。由于一个比特位只能表示 0 和 1 两种状态,所以 BitMap 能映射的状态有限,但是使用比特位的优势是能大量的节省内存空间。 在 Redis 中,可以把 Bitmaps 想象成一个 ...
分类:
其他好文 时间:
2021-04-08 13:08:56
阅读次数:
0