在爬取数据时有时候有些文件数据需要爬取下载下来使用多线程下载可以让程序跑的更快点。 scrapy中有个扩展可以使用扩展模块来实现下载。 在自己的spider中加入 custom_settings 在要下载的时候添加 ...
分类:
编程语言 时间:
2017-07-12 23:36:37
阅读次数:
376
Python、Lua和Ruby之优劣 Python Python的优点:1、Python比其它语言有更多扩展模块。2、在网上可以找到很多Python教程。不仅如此,还有大量的英文书籍和资料。Python.org有很多为初学者准备的依主题组织的资料、教程和编程指南,此外还有很多链接和参考。3、很多人都 ...
分类:
编程语言 时间:
2017-07-04 23:17:00
阅读次数:
190
一、系统环境说明本次实验基于CentOS6.8_x64(6.x均可),编译安装php5.6.12包含以下四个扩展模块(包):libmcrypt-2.5.8.tar.gz;php-redis.tar.gz;jpegsrc.v8d.tar.gz;zendopcache-7.0.5.tar.gz可自行到对应官方网站下载最新软件包,本例软件包版本如上所列,如需要本例软件..
分类:
Web程序 时间:
2017-06-29 22:11:20
阅读次数:
244
利用ArcGIS JavaScript API加载高德在线地图的扩展 使用方法 1、 在api引入之前配置dojoConfig 2、然后在代码中可以如下方式构造layer 效果图 详细代码可以参见 https://github.com/wandergis/gaodeLayer ...
分类:
编程语言 时间:
2017-06-28 20:16:58
阅读次数:
268
常用函数:substr和instr1.SUBSTR(string,start_position,[length]) 求子字符串,返回字符串解释:string 元字符串start_position 开始位置(从0开始)length 可选项,子字符串的个数 2.INSTR(string,subStrin ...
分类:
数据库 时间:
2017-06-23 21:00:36
阅读次数:
219
Optical Flow Estimation using a Spatial Pyramid Network spynet 本文将经典的 spatial-pyramid formulation 和 deep learning 的方法相结合,以一种 coarse to fine approach,进 ...
分类:
Web程序 时间:
2017-06-21 13:54:19
阅读次数:
203
一、算法思想: DBSCAN(Density-Based Spatial Clustering of Applications with Noise)是一个比较有代表性的基于密度的聚类算法。与划分和层次聚类方法不同,它将簇定义为密度相连的点的最大集合,能够把具有足够高密度的区域划分为簇,并可在噪声的 ...
分类:
数据库 时间:
2017-06-20 11:36:44
阅读次数:
236
大致看了看这个paper, 很novel. 我的观点: 在traditional convolutional neural netwoks 中,我们通常会depend 于 extracting features. 而本paper把 hand-crafted 和 feature extraction ... ...
分类:
Web程序 时间:
2017-06-18 11:51:12
阅读次数:
198
cd /usr/local/src/php-5.4.36/ext/ # PHP 扩展模块一般在这个目录下,如果没有需要自行下载cd curl/ # 我们以 curl 模块为例/usr/local/php/bin/phpize # phpize 命令用于扩展 php 扩展模块./configure -... ...
分类:
Web程序 时间:
2017-06-17 21:37:58
阅读次数:
169