码迷,mamicode.com
首页 >  
搜索关键字:nodejs express 爬虫 网络爬虫    ( 21321个结果
Python 实现的下载op海贼王网的图片(网络爬虫)
没得事就爬一下我喜欢的海贼王上的图片 需要在d盘下建立一个imgcache文件夹 # -*- coding: utf-8 -*- import urllib import urllib2 import json from bs4 import BeautifulSoup import threadpool import thread class htmlpaser: de...
分类:编程语言   时间:2014-06-29 07:15:05    阅读次数:304
【Heritrix源代码分析4】开始一个爬虫抓取的全流程代码分析
在创建一个job后,就要开始job的运行,运行的全流程如下: 1、在界面上启动job 2、index.jsp 查看上述页面对应的源代码 Start 3、action.jsp String sAction = request.getParameter("action"); if(sAction != null) { // Need ...
分类:其他好文   时间:2014-06-20 09:24:23    阅读次数:272
selenium2+phantomjs入门范例
这是我学习爬虫比较深入的一步了,大部分的网页抓取用urllib2都可以搞定,但是涉及到JavaScript的时候,urlopen就完全傻逼了,所以不得不用模拟浏览器,方法也有很多,此处我采用的是selenium2+phantomjs,原因在于:selenium2支持所有主流的浏览器和phantomj...
分类:Web程序   时间:2014-06-11 11:17:54    阅读次数:994
nodejs addon用c++
1, 安装nodejs安装python。2,安装node-gyp:sudo npm install -g node-gyp3,写代码:新建一个目录,创建hello.cc文件,然后创建binding.gyp文件:hello.cc#include#includeusingnamespace v8;Han...
分类:编程语言   时间:2014-06-11 11:10:24    阅读次数:380
Numeral.js 是一个用于格式化和数字四则运算的js 库
Numeral.js 是一个用于格式化和数字四则运算的js 库,将数字可以格式化为货币,百分比,时间,甚至是小数,千位,和缩写格式...
分类:Web程序   时间:2014-06-07 15:36:01    阅读次数:229
Nodejs Express框架
好了,今天我们开始分享Node. learn to share . yes , it is ,especially share your happiness with others. 好了,进入正题. var express  = require('express'); var app = express.createServer(); app.get('/',func...
分类:Web程序   时间:2014-06-07 15:24:26    阅读次数:230
Windows下Node.js开发环境搭建
1、http://nodejs.org/下载node.js运行环境安装2、打开DOS命令行 .安装express框架1>npm install express 末尾显示如下为安装成功.安装mysql模块1npm install mysql 末尾显示如下为安装成功3、www.jetbrains.co....
分类:Windows程序   时间:2014-06-07 06:20:13    阅读次数:299
nodejs学习(持续更新中)
nodejs和express的安装什么的,网上基本都有现成的了,这里有点说下, 在较早点的版本(如3.5.0) npm install -g express@3.5.0 后,可以直接使用 express helloWorld创建工程, 但最新express4.0版本中将命令工具分家出来...
分类:Web程序   时间:2014-06-07 06:17:25    阅读次数:213
[MS-SQLserver2005]Windows64位安装问题
由于部分软件仍然无法摆脱sql server2005,而且在于2005本身小而精,所以在window8下sqlserver2005的支持还是必要的。下了好多版本的sqlserver express ,包括sp1,sp2,sp3,sp4,均无法通过。去微软官方网站上查,发现Microsoft SQL ...
分类:数据库   时间:2014-06-06 09:18:33    阅读次数:333
cheerio数据抓取
很多语言都能写个爬虫抓取数据,js自然也可以,使用cheerio可以支持css检索,较快捷的获取需要的数据。首先,先把node.js给安装了。可到官网下载。安装好node.js后,使用npm安装cheerio。 我这里使用的是win7,可以在 node.js command prompt 里输入1....
分类:其他好文   时间:2014-06-05 19:16:34    阅读次数:245
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!