下载 第三方模块的下载地址:https://pypi.python.org/pypi 其他版本的第三方模块下载地址: pipy国内镜像目前有: 豆瓣 阿里云 中国科技大学 清华大学 华中理工大学 山东理工大学 1、安装 1.1 命令行下安装模块 例:xlrd模块 下载xlrd: tar.gz包解压后 ...
分类:
编程语言 时间:
2018-11-29 20:49:34
阅读次数:
233
#coding=utf-8 import urllib2 from HTMLParser import HTMLParser class HttpParser(HTMLParser): def __init__(self): HTMLParser.__init__(self) self.move=[... ...
分类:
其他好文 时间:
2018-11-29 11:00:39
阅读次数:
222
python基础python的历史python由吉多.范罗苏姆(简称:龟叔)在1989年圣诞节期间为打发假期时间创建的python崇尚优美、简单、清晰国内python主要应用的公司:豆瓣、知乎python主要应用领域:云计算、web开发、科学计算、系统运维、金融1991年第一个编译器诞生2004年python2.4Djiango的诞生具有跨时代的意义python的优缺点优点python的定位是优雅
分类:
编程语言 时间:
2018-11-26 00:19:22
阅读次数:
210
#https://movie.douban.com/top250?start=25&filter=要爬取的网页importrefromurllib.requestimporturlopendefgetPage(url):response=urlopen(url)returnresponse.read().decode(‘utf-8‘)defparsePage(s):ret=com.find
分类:
其他好文 时间:
2018-11-26 00:13:33
阅读次数:
355
1.pip install virtualenv 下载很慢的情况下 用豆瓣源 https://pypi.doubanio.com/simple pip install -i https://pypi.doubanio.com/simple/django 回车 virtualenv scrapytes ...
分类:
其他好文 时间:
2018-11-24 15:41:49
阅读次数:
215
第一次用python的Web框架,也是第一次听说Django,参考菜鸡教程和一些博客,倒腾了半天,算是有一个雏形。数据基于昨天爬的豆瓣电影信息,详见案例三。 Python版本:3.7.1 Django版本:2.1.3 Django安装命令 (安装在Python Lib\site-packages下 ...
分类:
编程语言 时间:
2018-11-21 16:09:25
阅读次数:
226
说到编译语言python,我想很多人最关注的还是他的就业前景以及薪资待遇,Python在国外(美国)相当流行,不过现在在国内是一个小众的语言,但是随着海龟们回国创业,越来越多的公司开始招收Python程序员了,未来Python在中国必将成为一门热门语言,说不定还会替代C语言成为高校相关专业的入门语言呢。我们熟知的豆瓣便是用Python搭建的,Facebook也是扎克一个人用Python捣腾出来的,
分类:
编程语言 时间:
2018-11-19 22:09:17
阅读次数:
231
from urllib.request import urlopen import re """ 爬虫,爬一个豆瓣网,把爬出来的存储到一个文件 """ def get_request(url): """ 把网址变为源码,因为计算机只能读懂源码,然后吧源码变为utf-8的格式 :param url: ... ...
分类:
其他好文 时间:
2018-11-19 13:33:23
阅读次数:
156
(1)爬取豆瓣电影Top250 https://blog.csdn.net/fighting_no1/article/details/50926008 (2)爬虫博客 https://cuiqingcai.com/?s=%E7%88%AC%E8%99%AB ...
分类:
微信 时间:
2018-11-16 15:11:58
阅读次数:
209
一、简介 爬虫就是利用代码大量的将网页前端代码下载下来使用的一种程序,一般来说常见的目的为下: 1、商业分析使用:很多大数据公司都会从利用爬虫来进行数据分析与处理,比如说要了解广州当地二手房的均价走势就可以到房屋中介的网站里去爬取当地房源的价钱除以平方米 2、训练机器:机器学习需要大量的数据,虽然网 ...
分类:
编程语言 时间:
2018-11-16 11:40:15
阅读次数:
166