码迷,mamicode.com
首页 >  
搜索关键字:nodejs express 爬虫 网络爬虫    ( 21321个结果
如何优化网站关键词.
第一点:做好关键词分析(也叫关键词定位):这是进行SEO优化最重要的一环,关键词分析包括:关键词注重量分析、竞争对手分析、关键词与网站相关性分析、关键词安顿、关键词排行猜想。 第二点:网站架构分析:网站结构符合搜索引擎的爬虫喜欢则有利于SEO优化。网站架构分析包括:除去网站架构不良计划、完结树状目....
分类:Web程序   时间:2014-06-12 20:13:00    阅读次数:309
【自用】爬虫配置XML时拼接URL中文转Unicode问题(例如北京转成%u5317%u4EAC)
${"%u"+java.lang.Integer.toHexString(region.toString().charAt(s.toInt()))} 这样转换成的每个字符后面会有空行,用的时候需要regionUnicode.toSt...
分类:其他好文   时间:2014-06-12 17:47:11    阅读次数:186
express cookie-session解惑
express的中间件基于connect模块而来,所以相关文档可以直接参考http://www.senchalabs.org/connect/使用cookie-session中间件过程中,比较困惑,所以记录如下 1.session 原理: session是基于cookie的 客户端...
分类:其他好文   时间:2014-06-12 16:59:17    阅读次数:392
使用 NodeJS + Express从GET/POST Request 取值
过去无论哪一种网站应用程式的开发语言,初学者教学中第一次会提到的起手式,八九不离十就是GET/POST Request 的取值。但是,在Node.js+ Express 的世界中,仿佛人人是高手,天生就会使用,从不曾看到有人撰文说明。这应该算是开发Web Service 的入门,在Client 与S...
分类:Web程序   时间:2014-06-10 20:35:04    阅读次数:289
Node.js读写中文内容文件操作
由于Node.js仅支持如下编码:utf8, ucs2, ascii, binary, base64, hex,并不支持中文GBK或GB2312之类的编码, 因此如果要读写中文内容,必须要用额外的模块:iconv-lite 注:Node的iconv模块,仅支持linux,不支持Windows,因此要用纯js的iconv-lite,另:作者说iconv-lite的性能更好,具体参考git站点:i...
分类:Web程序   时间:2014-06-10 17:52:42    阅读次数:255
express的基本配置项
express自动生成的app.js中有一段代码用app.set和app.use对express进行配置,但这些配置都是什么意思,以及都能做哪些配置并没有展开。这一节就专门来讲express的配置。上节已经介绍了几个设置,接下来先介绍剩下的几个:app.use(express.favicon());...
分类:其他好文   时间:2014-06-10 17:14:56    阅读次数:218
日益封闭的百度,教我如何信任你?
不知从何时开始,百度禁止或者减少了用户在搜索栏中使用“site”这样的关键字进行百度云盘的内容搜索。比如:但是如果是使用bing或是google还是可以搜索出这两个大咖的爬虫缓存过的信息,如bing的缓存记录:小谷由于XX原因,让我大中华和谐了,反正我现在的网络是进不去,就不演示了。但是你直接单击连...
分类:其他好文   时间:2014-06-10 16:48:42    阅读次数:269
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!