MongoDB 2.2 引入一个新特性–TTL 集合,TTL集合支持失效时间设置,或者在某个特定时间,集合自动清除超时文档,者用来保存一个诸如session会话信息的时候非常有用。 如果想使用TTL集合,用用到 expireAfterSeconds 选项 mongo官网使用文档设置方法: Expir ...
分类:
数据库 时间:
2020-01-10 10:23:03
阅读次数:
264
爬虫第一步:新建项目 选择合适的位置,执行命令:scrapy startproje xxxx(我的项目名:douban) 爬虫第二步:明确目标 豆瓣电影排行url:https://movie.douban.com/top250?start=0, 分析url后发现srart=后面的数字,以25的步长递 ...
分类:
数据库 时间:
2020-01-10 01:10:53
阅读次数:
114
大数据时代,python爬虫工程师人才猛增,本课程专为爬虫工程师打造,课程有四个阶段,爬虫0基础入门->项目实战->爬虫难点突破->scrapy框架快速抓取,带你系统学习。课程精选多个实战项目,从易到难,层层深入。不同项目解决不同的抓取问题,带你从容抓取主流网站,进阶部分针对性讲解数据抓取的难点和面... ...
分类:
编程语言 时间:
2020-01-10 00:59:54
阅读次数:
298
一 . 什么是固定集合 MongoDB中有一种特殊类型的集合,值得我们特别留意,那就是固定集合(capped collection)。 固定集合可以声明collection的容量大小,其行为类似于循环队列。数据插入时,新文档会被插入到队列的末尾,如果队列已经被占满,那么最老的文档会被之后插入的文档覆 ...
分类:
移动开发 时间:
2020-01-09 22:48:01
阅读次数:
95
两种安装使用mongodb方法如下: Install && Remove 1. Using apt tool 更新apt并安装: // update apt sudo apt update && sudo apt upgrade -y // install sudo apt install mong ...
分类:
数据库 时间:
2020-01-09 21:02:31
阅读次数:
99
本人免费整理了Java高级资料,涵盖了Java、Redis、MongoDB、MySQL、Zookeeper、Spring Cloud、Dubbo高并发分布式等教程,一共30G,需要自己领取。传送门:https://mp.weixin.qq.com/s/osB-BOl6W-ZLTSttTkqMPQ 开 ...
分类:
编程语言 时间:
2020-01-09 20:41:26
阅读次数:
127
基于对2019年市场上影响较大的数据泄露事件,例如:中国求职者MongoDB数据泄露/澳大利亚平面设计服务网站Canva数据泄露/ Zynga2.18 亿网游玩家数据泄露……等等一系列的影响力较大并且泄露数据较大的事件来看,数据安全工作必须抓紧落实,并且选择合适安全的企业加密软件工具来满足现今时代企业对于数据防泄漏的迫切需求!
分类:
其他好文 时间:
2020-01-09 01:33:56
阅读次数:
123
一、参考资料 1.《Python网络数据采集》图灵工业出版社 2.《精通Python爬虫框架Scrapy》人民邮电出版社 3.[Scrapy官方教程](http://scrapy-chs.readthedocs.io/zh_CN/0.24/intro/tutorial.html) 4.[Python ...
分类:
编程语言 时间:
2020-01-09 01:11:20
阅读次数:
98
1. 下载Mongodb 下载地址: https://www.mongodb.com/download-center/community 2. 安装单机版mongodb 1) 解压缩 tar -xvf mongodb-linux-x86_64-rhel70-4.2.2.tgz 2)加入环境变量 vi ...
分类:
数据库 时间:
2020-01-09 00:58:24
阅读次数:
72
re简单实践 分析网页,很容易得出规律: css字体颜色标记电话号码 代码实现: import re import requests headers = { "User-Agent":"Mozilla/5.0 (Windows NT 10.0; Win64; x64; rv:71.0) Gecko/ ...
分类:
编程语言 时间:
2020-01-08 23:04:51
阅读次数:
230