在使用selenium+phantomjs的时候在Windows平台下能够正常工作，在Linux下却不能，并得到错误信息: 在ST上找到答案:http://stackoverflow.com/a/36159299/4447404 在初始化driver时传入参数"service_args=['--ig ...
分类：
其他好文 时间：
2017-01-09 16:10:17
阅读次数：
3247
Qt下静态编译Qt，根据我的经验，如果按照Windows下那种直接拿官方sdk安装之后的文件来编译是行不通的，需要直接下载Qt的source包，目前诺基亚的源码叫做qt-everywhere-opensource-src的tar包，到网上一查，乖乖，大部分人编译这个包居然花费了12～13个小时！但是 ...
分类：
系统相关 时间：
2017-01-05 07:59:05
阅读次数：
649
网页访问常用到库： requests（网页请求） BeautifulSoup（从网页抓取数据） selenium（模拟浏览器行为） PhantomJS（虚拟浏览器） 定时爬取数据： 断线重连解决方法： 引入新函数reloading（） ...
分类：
编程语言 时间：
2017-01-01 07:39:53
阅读次数：
204
长达一个多月的终于要结束了，感觉在结对编程地过程中，不仅学会了为你这个项目，最重要的是学会了测试驱动开发，对代码进行完善地性能和功能测试，这样才可以做出一个高质量可用于实用地项目。 本次微信实战开发，包括结对编程地时间，自己大概花了100小时进行开发。我主要负责地部分是功能部分地debug，服务器部 ...
分类：
Web程序 时间：
2017-01-01 00:46:09
阅读次数：
222
[本文出自天外归云的博客园] 前篇 用webdriver+phantomjs实现无浏览器的自动化过程 本篇 想法与实现 我想要将博客园“我的闪存”部分内容爬取备份到本地文件，用到了WebDriver和Phantomjs的无界面浏览器。对于xpath的获取与校验需要用到firefox浏览器，安装fir ...
分类：
编程语言 时间：
2016-12-29 20:13:29
阅读次数：
338
我现在使用 phantomJS 截图，然后裁剪得到验证码，再通过Python光学识别获取验证码。 这个过程中遇到 phantomJS 截图大小不一致的问题，我本地的和服务器的图片，验证码的位置不一致。没办法，只好把服务器上的图片 scp 下来，然后更改像素位置。 为什么不直接下载图片下来呢？ 每次点 ...
分类：
其他好文 时间：
2016-12-24 23:11:24
阅读次数：
351
安装步骤 测试 在终端执行phantomjs命令，如果跟我下图的结果一样就表示安装成功了。 如果你还不放心的话，可以创建一个JS文件测试一下。文件内容如下： 保存为test.js，然后通过phantomjs test.js执行。下图是我执行的结果： ...
分类：
Web程序 时间：
2016-12-24 14:21:44
阅读次数：
333
from selenium import webdriver from selenium.webdriver.common.desired_capabilities import DesiredCapabilities #设置浏览器请求头 dcap = dict(DesiredCapabilitie ...
分类：
Web程序 时间：
2016-12-17 19:55:00
阅读次数：
1729
这篇博文主要讲一下如何使用Phantomjs进行数据抓取，这里面抓的网站是太平洋电脑网估价的内容。主要是对电脑笔记本以及他们的属性进行抓取，然后在使用nodejs进行下载图片和插入数据库操作。 ...
分类：
数据库 时间：
2016-12-07 01:19:30
阅读次数：
275
概要 这篇博客是在上一篇博客Phantomjs+Nodejs+Mysql数据抓取（1.抓取数据） http://blog.csdn.net/jokerkon/article/details/50868880 后进行的第二部分，请各位读者在看这篇博客之前先浏览上一篇，因为这里面有部分代码会沿用到上一部 ...
分类：
数据库 时间：
2016-12-07 01:19:14
阅读次数：
411
