FPM(FastCGI Process Manager)是PHP FastCGI运行模式的一个进程管理器，从它的定义可以看出，FPM的核心功能是进程管理，那么它用来管理什么进程呢？这个问题就需要从FastCGI说起了。 FastCGI是Web服务器(如：Nginx、Apache)和处理程序之间的一种 ...
分类：
其他好文 时间：
2019-03-01 09:28:44
阅读次数：
443
一,介绍 Library cache是Shared pool的一部分，它几乎是Oracle内存结构中最复杂的一部分，主要存放shared curosr（SQL）和PLSQL对象（function，procedure，trigger）的信息，以及这些对象所依赖的table，index，view等对象的 ...
分类：
数据库 时间：
2019-02-27 16:09:31
阅读次数：
197
回顾requests实现数据爬取的流程 指定url 基于requests模块发起请求 获取响应对象中的数据 进行持久化存储 其实，在上述流程中还需要较为重要的一步，就是在持久化存储之前需要进行指定数据解析。因为大多数情况下的需求，我们都会指定去使用聚焦爬虫，也就是爬取页面中指定部分的数据值，而不是整 ...
分类：
编程语言 时间：
2019-02-26 19:47:53
阅读次数：
227
引入 Requests 唯一的一个非转基因的 Python HTTP 库，人类可以安全享用。 警告：非专业使用其他 HTTP 库会导致危险的副作用，包括：安全缺陷症、冗余代码症、重新发明轮子症、啃文档症、抑郁、头疼、甚至死亡。 今日概要 基于requests的get请求 基于requests模块的p ...
分类：
编程语言 时间：
2019-02-26 19:19:50
阅读次数：
239
file_obj时Django的上传文件对象，可以作为model表中FileField字段的值 ...
分类：
Web程序 时间：
2019-02-26 17:42:07
阅读次数：
272
笔者最近在看scrapy爬虫实战，在scrapy入门案例中遇到了许多问题，特别是在scrapy中使用css和xpath，遇到实际应用无法实现，只能做到基础的功能 于是笔者摆脱scrapy框架，按照requests这些基础知识来重做项目，发现运行速度远远低于scrapy框架！ 下面是代码，代码也存在较 ...
分类：
其他好文 时间：
2019-02-26 00:47:44
阅读次数：
215
今天用requests库进行模拟登录 用的账号密码的方式进行登录，主要找到登录的网站，在进行登录 ...
分类：
其他好文 时间：
2019-02-26 00:43:46
阅读次数：
192
1.pysider的demo（常规操作） from pyspider.libs.base_handler import * class Handler(BaseHandler): crawl_config = { } @every(minutes=24 * 60) def on_start(self ...
分类：
其他好文 时间：
2019-02-25 18:39:24
阅读次数：
195
import requests # 定义爬取url地址 base_url = 'https://www.baidu.com/' # 定义代理IP地址 proxies = {'http':'http://121.31.193.38:8123'} # 使用代理获取想要的页面 response = req... ...
分类：
其他好文 时间：
2019-02-22 22:58:30
阅读次数：
171
php常用运行方式pm=dynamic动态分配pm=static固定分配php内存优化：针对小型服务器：pm使用ondemand模式，具体配置如下：pm=ondemandpm.max_children=5#最大php进程数；pm.process_idle_timeout=10s#空闲进程保持10s后自动退出，避免占用内存；pm.max_requests=200#php处理的最大请求数；reques
分类：
Web程序 时间：
2019-02-21 11:09:12
阅读次数：
222
