本次实战是利用爬虫爬取链家的新房(声明: 内容仅用于学习交流, 请勿用作商业用途) 环境 win8, python 3.7, pycharm 正文 1. 目标网站分析 通过分析, 找出相关url, 确定请求方式, 是否存在js加密等. 2. 新建scrapy项目 1. 在cmd命令行窗口中输入以下命 ...
分类:
编程语言 时间:
2018-11-09 18:19:26
阅读次数:
339
Dockerfile中常用命令:语法组成:1注释信息2指令---参数[通常要大写|实质上不区分大小写]3顺序执行4第一个非注释行必须是from[基于那个基础镜像制作]5需要一个专用目录[自己创建]6首字目必须大写---Dockerfile7制作镜像依赖到文件或者包组时,必须提前准备至专用目录下.dockerignorefile--每一行中定义一个忽略文件--创建在工作目录中例如:pam.d/su*
分类:
其他好文 时间:
2018-11-09 10:49:00
阅读次数:
222
SP++ (Signal Processing in C++) 是一个关于信号处理与数值计算的开源 C++程序库,该库提供了信号处理与数值计算中常用算法的 C++实现。SP++中所有算法都以 C++类模板方法实现,以头文件形式组织而成,所以不需要用户进行本地编译,只要将相关的头文件包含在项目中即可使... ...
分类:
其他好文 时间:
2018-11-06 22:26:33
阅读次数:
298
1.kill NAME kill terminate a process (终止进程) SYNOPSIS kill [ signal] pid 说明: kill 给指定进程发送指定信号. 如果没有指定信号, 则发送 TERM 信号. TERM 信号会杀死不能俘获该信号的进程. 对于其他进程, 可能需 ...
分类:
系统相关 时间:
2018-11-06 20:22:25
阅读次数:
231
每种语言都有自己的优势,互相结合起来各取所长程序执行起来效率更高或者说哪种实现方式较简单就用哪个,nodejs是利用子进程来调用系统命令或者文件,文档见 "http://nodejs.org/api/child_process.html" ,NodeJS子进程提供了与系统交互的重要接口,其主要API ...
分类:
Web程序 时间:
2018-11-05 16:20:31
阅读次数:
394
http://blog.sina.com.cn/s/blog_63041bb80102uy5o.html 背景: 最近写的Python代码不知为何,总是执行到一半卡住不动,为了使程序能够继续运行,设置了函数调用超时机制。 代码: 代码: 代码: import time import signal d ...
分类:
编程语言 时间:
2018-11-04 11:11:30
阅读次数:
286
原来的代码是 dev-c 报错: program received signal sigsegv arithmetic ** 改正后 c语言&&和||的短路性质分析 - 痞子晶的博客 - CSDN博客 https://blog.csdn.net/yhj110911119/article/detail ...
分类:
编程语言 时间:
2018-11-03 21:10:12
阅读次数:
228
RPC(Remote Procedure Call Protocol)远程过程调用协议,它是一种通过网络,从远程计算机程序上请求服务,而不必了解底层网络技术的协议。说的再直白一点,就是客户端在不必知道调用细节的前提之下,调用远程计算机上运行的某个对象,使用起来就像调用本地的对象一样。目前典型的RPC实现框架有:Thrift(facebook开源)、Dubbo(alibaba开源)等等。RPC框架针对网络协议、网络I/O模型的封装是透明的,对于调用的客户端而言,它就认为自己在调用本地的一个对象。至于传输层上,运用的是TCP协议、UDP协议、亦或是HTTP协议,一概不关心。从网络I/O模型上来看,是基于select、poll、epoll方式、还是IOCP(I/O Completion Port)方式承载实现的,对于调用者而言也不用关心。
分类:
Web程序 时间:
2018-10-28 20:47:27
阅读次数:
221
新要求: 1、实现在线答题 2、答题结束后可以判断对错 3、并将错误的结果保存起来 代码: #include <stdio.h> #include <ctype.h> #include <time.h> #include <stdlib.h> #include <windows.h> #define ...
分类:
其他好文 时间:
2018-10-28 14:59:21
阅读次数:
107
scrapy爬虫采集数据存入mongodb采集效果如图: 1.首先开启服务切换到mongodb的bin目录下 命令:mongod --dbpath e:\data\db 另开黑窗口 命令:mongo.exe 2.连接可视化工具 studio—3t 建立本地连接 如图: 3.代码如下 采集的是玻璃网站... ...
分类:
数据库 时间:
2018-10-25 14:13:28
阅读次数:
166