这是我最近学习用Python做爬虫时的一个小练习，这段程序可以可以统计拉勾网北京地区的数据挖掘类职位所需的各项技能。程序未完成，还需要加工，目前职位的网址为手动添加，作为程序演示，后续会改为自动读取网址。 代码如下： 1 #encoding: utf-8 2 ''' 3 本段代码可以统计拉勾网北京地
分类：
编程语言 时间：
2016-03-04 00:43:44
阅读次数：
226
不知不觉间，在这圈子里呆了这么多年了，可是没赚到钱，找工作也难找，感觉挺难的。 去年放弃了坚持了快4年的wp平台，转战android，自已弄了一个简单的python爬虫服务器，写好移动接口，花了二个月时间写完安卓应用，最近几天忙着上架的事情，今晚静下心来，想说说应用在市场中的定位。 在wp，由于生态
分类：
其他好文 时间：
2016-03-01 06:12:34
阅读次数：
133
转自：http://cuiqingcai.com/947.html 那么接下来，小伙伴们就一起和我真正迈向我们的爬虫之路吧。 1.分分钟扒一个网页下来 怎样扒网页呢？其实就是根据URL来获取它的网页信息，虽然我们在浏览器中看到的是一幅幅优美的画面，但是其实是由浏览器解释才呈现出来的，实质它是一段HT
分类：
编程语言 时间：
2016-02-29 21:36:44
阅读次数：
222
转自：http://cuiqingcai.com/1052.html 大家好哈，我呢最近在学习Python爬虫，感觉非常有意思，真的让生活可以方便很多。学习过程中我把一些学习的笔记总结下来，还记录了一些自己实际写的一些小爬虫，在这里跟大家一同分享，希望对Python爬虫感兴趣的童鞋有帮助，如果有机会
分类：
编程语言 时间：
2016-02-29 21:34:01
阅读次数：
146
转自：http://cuiqingcai.com/927.html 大家好哈，最近博主在学习Python，学习期间也遇到一些问题，获得了一些经验，在此将自己的学习系统地整理下来，如果大家有兴趣学习爬虫的话，可以将这些文章作为参考，也欢迎大家一共分享学习经验。 Python版本:2.7，Python
分类：
编程语言 时间：
2016-02-29 21:18:07
阅读次数：
200
python爬虫抓网页的总结 更多 python 爬虫 学用python也有3个多月了，用得最多的还是各类爬虫脚本：写过抓代理本机验证的脚本，写过在discuz论坛中自动登录自动发贴的脚本，写过自动收邮件的脚本，写过简单的验证码识别的脚本，本来想写google music的抓取脚本的，结果有了强大的
分类：
编程语言 时间：
2016-02-29 12:44:08
阅读次数：
408
年前写了验证码上篇，本来很早前就想写下篇来着，只是过年比较忙，还有就是验证码破解比较繁杂，方法不同，正确率也会有差异，我一直在找比较好的方案，但是好的方案都比较专业，设涉及到了图形图像处理这些，我也是一知半解，所以就耽误了下来，在此对一直等待的同学说声抱歉。有兴趣的同学可以自行看看这方面的资料。因为
分类：
编程语言 时间：
2016-02-29 12:37:17
阅读次数：
340
原创python爬虫代码 主要用到urllib2、BeautifulSoup模块 #encoding=utf-8 import re import requests import urllib2 import datetime import MySQLdb from bs4 import Beaut
分类：
编程语言 时间：
2016-02-29 12:15:23
阅读次数：
191
这里使用的是xpath这个第三方python库 使用 from lxml import etree 导入 使用： select = etree.HTML(html) content = select.xpath() for each in content: print each 一个简单的demo：
分类：
编程语言 时间：
2016-02-26 00:30:03
阅读次数：
234
经过多次尝试，模拟登录淘宝终于成功了，实在是不容易，淘宝的登录加密和验证太复杂了，煞费苦心，在此写出来和大家一起分享，希望大家支持。 本篇内容 1. python模拟登录淘宝网页 2. 获取登录用户的所有订单详情 3. 学会应对出现验证码的情况 4. 体会一下复杂的模拟登录机制 探索部分成果 1.
分类：
编程语言 时间：
2016-02-25 11:40:57
阅读次数：
306
