1. NoSQL简介 NoSQL(NoSQL = Not Only SQL ),非关系型数据库,也意"not only SQL"。 通过应用实践证明,关系模型是非常适合于客户服务器编程,远远超出预期的利益,今天它是结构化数据存储在网络和商务应用的主导技术。 1.1 RDBMS vs NoSQL RD ...
分类:
数据库 时间:
2020-03-28 00:51:53
阅读次数:
106
数据存储 文本文件—TXT、JSON、CSV 关系型数据库—MySQL 非关系型数据库—MongoDB、Redis 文件打开 open(),第二个参数设置文件打开方式 ※ r:只读,文件指针在文件开头 ※ rb:二进制只读,文件指针在文件开头 ※ r+:读写方式,文件指针在文件开头 ※ w:写入,如 ...
分类:
Web程序 时间:
2020-03-27 17:11:24
阅读次数:
111
工欲善其事必先利其器,今天简单分享一下我的武器库。 主要包括两个方面,idea的插件;还有mac的常用软件推荐。 希望可以在编码之余,提高自己的工作效率。 idea插件 翻看了宇宙条上各种推荐的插件,实际我用下来感觉最好的插件如下。 按照优先级列举一下,好处谁用谁知道: 1, lombok, 少写了 ...
分类:
系统相关 时间:
2020-03-27 12:39:52
阅读次数:
199
最近学习Python爬虫,"明明是按照步骤做,怎么我会出现好多的问题?" 引言:在网页之中,将爬取的内容输出展示出来,但是往往会出现很多的格式的问题, 如 s = “\n\n\n\n\n\n\n\n 正经的内容\n\n\n\ 又是内容 \n 不要的 \n” 如何将上面不要的字符删除或者提取出需要的呢 ...
分类:
编程语言 时间:
2020-03-27 10:38:53
阅读次数:
80
https://www.cnblogs.com/linguoguo/p/10640179.html MongoDB: 更高的写入负载 默认情况下,MongoDB更侧重高数据写入性能,而非事务安全,MongoDB很适合业务系统中有大量“低价值”数据的场景。但是应当避免在高事务安全性的系统中使用Mong ...
分类:
数据库 时间:
2020-03-27 09:15:10
阅读次数:
111
AdminMongo是针对Mongodb设计的一款Web端可视化工具,它是使用Node.js编写,这里将安装过程记录一下. 一.下载AdminMongo 前题:安装使用adminMongo需提前安装好node.js环境 下载地址:https://github.com/mrvautin/adminMo ...
分类:
其他好文 时间:
2020-03-26 13:44:49
阅读次数:
104
来源:素文宅博客 地址:https://blog.yoodb.com/yoodb/article/detail/1578 MongoDB是一个开源的NoSQL文档数据库。它可以存储多种数据结构,类似JSON的BSON,可以存储复杂数据类型。 Spring Boot为使用MongoDB提供了很多便利, ...
分类:
数据库 时间:
2020-03-26 01:40:45
阅读次数:
87
一、ItemPipeLine 1.爬虫提取出的数据存入item之后,item中保存的数据需要进一步处理,比如:清洗,去重,存储等 2.pipeline需要process_item函数 (1)process_item?:spider提出来的item作为参数出入,同时传入的还有spider;此方法是必须 ...
分类:
编程语言 时间:
2020-03-26 01:16:56
阅读次数:
85
一、引入 M-H采样用来解决MCMC采样效率低的问题,主要是更改了MCMC中接受率的具体定义,但是这个方法不适用于高维。 二、细致平稳条件 从$\pi(i)Q_{ij}\alpha (ij)= \pi(j)Q_{ji}\alpha (ji)$出发(1)式 移项$\alpha (ij)=\alpha ...
分类:
其他好文 时间:
2020-03-26 00:58:14
阅读次数:
91