摘要： 双12官方攻略出炉！ 2018阿里云双12年终大促活动已经于12月7日正式开启，从已开放的活动页面来看，活动分为两个阶段： 12月7日-12月23日的拉新返现阶段和12月24日-12月28日的TOP100英雄榜PK阶段。 活动核心亮点：老会员拉新可享25%返现+最高2.5万奖金，拉新前100 ...
分类：
其他好文 时间：
2018-12-10 15:50:30
阅读次数：
203
#coding=utf-8 _date_ = '2018/12/9 16:18' import requests import re import json import time def get_one_page(url): headers={ 'User-Agent':'Mozilla/5.0 ... ...
分类：
其他好文 时间：
2018-12-09 17:53:07
阅读次数：
276
1、 爬虫 1、 用urllib.request库请求一个url的内容。 2、 用 beautifulsoup解析request库请求得到的内容。 3、 在网页上右键 检查，阅读html代码，归纳出想爬到信息属于html树形结构的哪一部分。 4、 用beautifulsoup的next_elemen ...
分类：
其他好文 时间：
2018-12-01 00:23:31
阅读次数：
608
网络爬虫（又被称为网页蜘蛛，网络机器人，在FOAF社区中间，更经常的称为网页追逐者），是一种按照一定的规则，自动地抓取万维网信息的程序或者脚本。另外一些不常使用的名字还有蚂蚁、自动索引、模拟程序或者蠕虫。 ...
分类：
编程语言 时间：
2018-11-30 20:02:59
阅读次数：
162
'''Requests+正则表达式爬取猫眼电影TOP100''''''流程框架：抓去单页内容：利用requests请求目标站点，得到单个网页HTML代码，返回结果。正则表达式分析：根据HTML代码分析得到电影的名称、主演、上映时间、评分、图片链接等信息。保存至文件：通过文件的形式保存结果，每一部电影 ...
分类：
其他好文 时间：
2018-11-29 01:17:50
阅读次数：
277
import json from multiprocessing import Pool import requests from requests.exceptions import RequestException import re def get_one_page(url): try: re... ...
分类：
其他好文 时间：
2018-11-08 18:17:21
阅读次数：
101
10月31日，阿拉丁小程序数据统计平台发布了2018年10月微信小程度报告，同时公布了10月份的TOP100榜单。“同程艺龙酒店机票火车”小程序继续有着稳定的表现，稳坐10月榜单的“头把交椅”。 而美团外卖和拼多多表现也很抢眼，分别排在第二第三名。榜单前三名现在已由小游戏转变为餐饮和电商类。由此可见 ...
分类：
微信 时间：
2018-11-07 16:34:03
阅读次数：
241
前言： 学习python3爬虫大概有一周的时间，熟悉了爬虫的一些基本原理和基本库的使用，本次就准备利用requests库和正则表达式来抓取猫眼电影排行TOP100的相关内容。 1、本次目标： 需要爬去出猫眼电影排行TOP100的电影相关信息，包括：名称、图片、演员、时间、评分，排名。提取站点的URL ...
分类：
其他好文 时间：
2018-11-04 22:58:34
阅读次数：
181
Requests+正则表达式爬取猫眼TOP100榜电影信息 MARK：将信息写入文件解决乱码方法，开启进程池秒爬。 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 ...
分类：
其他好文 时间：
2018-10-17 11:05:40
阅读次数：
229
爬取猫眼电影TOP100(http://maoyan.com/board/4?offset=90)1).爬取内容:电影名称，主演，上映时间，图片url地址保存到mariadb数据库中;2).所有的图片保存到本地/mnt/maoyan/电影名.png代码：importreimportpymysqlasmysqlfromurllibimportrequestfromurllib.requestimpo
分类：
编程语言 时间：
2018-10-10 10:37:24
阅读次数：
442
