其实这次的内容我是想放在上一篇的博文中的,但是上次犯懒了,就放在这里了奥。 基于mysql持久化操作: 将爬取数据写入文件这种情况还是少见的,因为文件无论是内存占用还是读写速度都存在一定的瑕疵,所以我们更多的是操作数据库。因为items对象已经准备好了所以我们只需要进行pipeline管道更改就可以 ...
分类:
编程语言 时间:
2020-10-10 17:35:46
阅读次数:
25
ifconfig:获取网卡信息uname-a查看版本信息uptime查看系统负载free-h查看内存使用情况who查看当前登录信息last查看本机登录记录history历史命令查询pwd显示当前目录cd切换路径ls-al查看文件cat查看小文件more查看大文件head-n查看开头X行tail-n查看末尾行tr替换wc-l显示行数-w显示单词数-c显示字节数stat文件具体存储信息cut按列提取d
分类:
系统相关 时间:
2020-10-10 17:17:58
阅读次数:
26
vmware16.0 centos7.8 1. 使用vmware安装 centos环境 cpu4个 内存4G 网络nat模式 2.配置网络 vim /etc/sysconfig/network-scripts/ifcfg-ens33 TYPE="Ethernet" PROXY_METHOD="non ...
分类:
其他好文 时间:
2020-10-10 17:16:23
阅读次数:
31
1.集群的数据迁移 在工作中经常会遇到redis集群的扩容的场景,因为当一个集群服务器中的内存不够用无法支撑更大数据量的缓存或者并发量不够(个人理解),就会将原有的集群扩展。集群扩容需要将集群中原有的master节点上的槽位以及数据迁移到新加入的master节点上。 每个槽都把要里面的数据迁移完才能 ...
分类:
其他好文 时间:
2020-10-09 21:40:42
阅读次数:
46
前言java从零手写实现redis(一)如何实现固定大小的缓存?java从零手写实现redis(二)redisexpire过期原理java从零手写实现redis(三)内存数据如何重启不丢失?java从零手写实现redis(四)添加监听器java从零手写实现redis(五)过期策略的另一种实现思路java从零手写实现redis(六)AOF持久化原理详解及实现java从零开始手写redis(七)LRU
分类:
其他好文 时间:
2020-10-09 21:18:10
阅读次数:
25
647. 回文子串 暴力三循环,一共有 n(n+1)/2个子串,分别判断每个子串是否是回文串 1 class Solution { 2 public int countSubstrings(String s) { 3 // 暴力三循环,一共有 n(n+1)/2个子串,分别判断每个子串是否是回文串 4 ...
分类:
其他好文 时间:
2020-10-09 21:12:05
阅读次数:
21
在 JAVA 语言中有8中基本类型和一种比较特殊的类型String。这些类型为了使他们在运行过程中速度更快,更节省内存,都提供了一种常量池的概念。常量池就类似一个JAVA系统级别提供的缓存。 8种基本类型的常量池都是系统协调的,String类型的常量池比较特殊。它的主要使用方法有两种: 直接使用双引 ...
分类:
其他好文 时间:
2020-10-09 20:51:31
阅读次数:
25
在《在tinycorelinux上安装lxc,lxd(1)》中我们讲到源码适配gcc443,由c11退回c99的一些处理,这里依然要处理大量gnu11的事。准备工作,及编译golangGrub加个swapfile=hda1进去。编译go1.12.6内存起码1g。准备git,git我们用4.x的,需要expat2.tcz和openssl-1.0.0.tcz,都用3.x的,按《在tinycolinux
分类:
系统相关 时间:
2020-10-09 20:31:03
阅读次数:
25
1、serverless 屏蔽服务器细节 2、domless (react/vue) 屏蔽 DOM 操作细节 3、compatless (jQuery) 屏蔽浏览器兼容细节 4、typeless (JavaScript)5、内存管理 less (java/C#) 6、编程less(可视化) 7、th ...
分类:
其他好文 时间:
2020-10-09 20:24:40
阅读次数:
28
Nginx相对于Apache的优势: 1.轻量级,采用C进行编写,同样的web服务,会占用更少的内存及资源 2.抗并发,nginx以epoll and kqueue作为开发模型,处理请求是异步非阻塞的,多个连接对应一个进程,负载能力比apache高很多, 而apache则是同步多进程模型,只能一个连 ...
分类:
Web程序 时间:
2020-10-08 19:50:06
阅读次数:
44