人一辈子最值得炫耀的不应该是你的财富有多少(虽然这话说得有点违心,呵呵),而是你的学习能力。技术更新迭代的速度非常快,那作为程序员,我们就应该拥有一颗拥抱变化的心,积极地跟进。 在 RabbitMQ 入门之前,我已经入门了 Redis、Elasticsearch 和 MongoDB,这让我感觉自己富 ...
分类:
其他好文 时间:
2020-06-21 23:41:49
阅读次数:
174
一.抓包工具 mitmproxy的使用 Fiddler手机抓包设置 Fiddler抓取内容自动保存本地 fiddler抓包syntaxview窗口乱码 Fiddler显示指定host请求,以及过滤无用的css,js 手机APP无法抓包(无法连接服务器) python爬虫用drony转发进行抓包转发 ...
分类:
移动开发 时间:
2020-06-21 19:53:18
阅读次数:
77
NoSQL简介 NoSQL,全名为Not Only SQL,指的是非关系型的数据库 随着访问量的上升,网站的数据库性能出现了问题,于是nosql被设计出来 优点/缺点 优点: 高可扩展性 分布式计算 低成本 架构的灵活性,半结构化数据 没有复杂的关系 缺点: 没有标准化 有限的查询功能(到目前为止) ...
分类:
其他好文 时间:
2020-06-21 16:01:59
阅读次数:
47
最近写一个小爬虫,需要拿到邮箱信息,发现拿不到,也不是ajax接口。最后查资料发现是被Cloudflare加密起来了,有加密肯定有解密。 通过大佬https://blog.shiniv.com/2016/09/decode-encode-cloudflare-address-obfuscation/ ...
分类:
编程语言 时间:
2020-06-21 15:47:23
阅读次数:
77
前言 小的时候心中总有十万个为什么类似的问题,今天带大家爬取一个问答类的网站。 本堂课使用正则表达式对文本类的数据进行提取,正则表达式是数据提取的通用方法。 环境介绍: python 3.6 pycharm requests re json 爬虫的一般思路 1、确定爬取的url路径,headers参 ...
分类:
编程语言 时间:
2020-06-19 23:11:46
阅读次数:
70
requests库是一个常用的用于http请求的模块,它使用python语言编写,可以方便的对网页进行爬取,是学习python爬虫的较好的http请求模块。 一、 requests模块的安装 首先我们要继续requests模块的安装。 1、 pip命令安装 windows系统下只需要在命令行输入命令 ...
分类:
编程语言 时间:
2020-06-19 21:12:53
阅读次数:
59
简介 什么是MongoDB? MongoDB 是由C++语言编写的,是一个基于分布式文件存储的开源数据库系统。 在高负载的情况下,添加更多的节点,可以保证服务器性能。 MongoDB 旨在为WEB应用提供可扩展的高性能数据存储解决方案。 MongoDB 将数据存储为一个文档,数据结构由键值(key= ...
分类:
数据库 时间:
2020-06-19 12:17:25
阅读次数:
52
(一)查询文档查询文档可以使用以下方法# 以非结构化的方式显示所有的文档db..find(document)# 以结构化的方式显示所有文档db..find(document).pretty()# 只返回一个文档(结构化方式)db..findOne()测试1 : 使用find()方法以非结构化的方式查... ...
分类:
数据库 时间:
2020-06-18 20:01:32
阅读次数:
506
(一)插入文档插入文档一共有3种方法,分别如下:# 插入一个或多个文档,如果是多个文档,用数组存放文档db..insert(document)# 插入1个文档db..insertOne(document)# 插入多个文档db..insertMany(document)测试1 :使用db..inser... ...
分类:
数据库 时间:
2020-06-18 19:46:07
阅读次数:
52
MySQL 5.7开始支持JSON,那还有必要使用MongoDB存JSON吗?请列出你的观点/理由。 一、观点A:支持MySQL存储JSON 1.MongoDB不支持事务,而MySQL支持事务。 2.MySQL相对MongoDB而言,MySQL的稳定性要优于MongoDB。 3.MySQL支持多种存 ...
分类:
数据库 时间:
2020-06-18 19:30:53
阅读次数:
65