pycharm中控制台运行后出现乱码。需要文件>>设置>>编辑器>>文件编码爬取网页#-*-coding:utf-8-*-
importrequests
#中文编码UTF-8
importsys
reload(sys)
sys.setdefaultencoding(‘utf-8‘)
#模拟浏览器
hea={‘User-Agent‘:‘Mozilla/5.0(WindowsNT6.2;WOW64)..
分类：
编程语言 时间：
2015-10-03 06:16:21
阅读次数：
342
最近研究搜索引擎、知识图谱和Python爬虫比较多，中文乱码问题再次浮现于眼前。虽然市面上讲述中文编码问题的文章数不胜数，同时以前我也讲述过PHP处理数据库服务器中文乱码问题，但是此处还是准备简单做下笔记。方便以后查阅和大家学习。主要包括raw_input输入、文件读取、变量比较等str、unicode、utf-8转换问题。
纪伯伦曾说过：“你无法同时拥有青春和关于青春的知识；因为青春忙于生计，没有余暇去求知；而知识忙于寻求自我，无法享受生活。”同样现在找工作的我，无法在拥有扎实基础知识的同时又兼顾深度的项...
分类：
编程语言 时间：
2015-10-02 00:19:43
阅读次数：
318
转自：http://cuiqingcai.com/954.html1.设置Headers有些网站不会同意程序直接用上面的方式进行访问，如果识别有问题，那么站点根本不会响应，所以为了完全模拟浏览器的工作，我们需要设置一些Headers 的属性。首先，打开我们的浏览器，调试浏览器F12，我用的是Chro...
分类：
编程语言 时间：
2015-09-29 11:18:26
阅读次数：
271
转自：http://cuiqingcai.com/977.html在前面我们已经搞定了怎样获取页面的内容，不过还差一步，这么多杂乱的代码夹杂文字我们怎样把它提取出来整理呢？下面就开始介绍一个十分强大的工具，正则表达式！1.了解正则表达式正则表达式是对字符串操作的一种逻辑公式，就是用事先定义好的一些特...
分类：
编程语言 时间：
2015-09-29 11:15:39
阅读次数：
374
最近拉肚子三天了，晚上单位又聚餐，一不小心吃多了点，晚上跑厕所跑的频繁，索性睡不着了，参照网上资料，敲了段python 爬虫代码，第一次学习除了shell 和js 外的脚本语言，无限的坑坑，都说python 的效率是...
分类：
编程语言 时间：
2015-09-21 19:51:39
阅读次数：
233
爬虫，是我学习的比较多的，也是比较了解的。打算写一个系列教程，网上搜罗一下，感觉别人写的已经很好了，我没必要重复造轮子了。爬虫不过就是访问一个页面然后用一些匹配方式把自己需要的东西摘出来。而访问页面经常用到的几个库，一是urllib和urllib2结合使用，二是requests的使用。第一种方法可以...
分类：
编程语言 时间：
2015-09-20 00:12:58
阅读次数：
444
Hi to all. Here comes the mini automatic key cutting machine iKeycutter CONDOR XC-MINI, the mini version of CONDOR XC-007. Why do you get iKeycutter C...
分类：
系统相关 时间：
2015-09-18 20:05:40
阅读次数：
228
If you get stuck on client side Mobile Service error and the error message is less useful, try to see the Logs tab in your Azure Mobile Service, you probably can get the useful information from the lo...
这篇文章主要Selenium+Python自动测试或爬虫中的常见定位方法、鼠标操作、键盘操作介绍，希望该篇基础性文章对你有所帮助，如果有错误或不足之处，请海涵~记录此站第一篇文章，希望能分享更多文章于此！一.定位元素方法这里有各种策略用于定位网页中的元素(locate elements)，你可以选择...
分类：
编程语言 时间：
2015-09-15 18:17:43
阅读次数：
716
环境准备
Python
我们使用Python2.7进行开发，注意配置好环境变量。
IDE
我们使用Pycharm进行开发，它和大名鼎鼎的Android Studio、IDEA同出一门——Jet Brains。
关于破解，很无耻的贴两个：
用户名：yueting3527
注册码：
===== LICENSE BEGIN =====
93347-12042010
00001FMHemWIs...
分类：
编程语言 时间：
2015-09-13 18:43:58
阅读次数：
345
