码迷,mamicode.com
首页 >  
搜索关键字:requests 、beautifulsoup    ( 5272个结果
2,创建host,通过zabbix-api脚本
1,创建zabbix api 脚本 [root@web3 zabbix]# cat test.py #! /usr/bin/python3 # -*- coding:utf-8 -*- import requests import json url = "http://192.168.0.11/za ...
分类:Windows程序   时间:2020-05-15 00:16:22    阅读次数:79
线程练习
# -*- coding: utf-8 -*- import json import threading import time import requests from openpyxl import load_workbook file ="data_xiancheng.xlsx" #要执行的文 ...
分类:编程语言   时间:2020-05-14 10:38:02    阅读次数:68
Python第一条网络爬虫,爬取一个网页的内容
一、球赛结果预测代码部分函数测试。 二、用requests库函数访问搜狗网页20次。 1 import requests 2 from bs4 import BeautifulSoup 3 def getHTMLText(self): 4 try: 5 r=requests.get(url,time ...
分类:编程语言   时间:2020-05-13 23:42:42    阅读次数:142
python-爬取中国大学排名网站信息【IndexError:list index out of range】
代码1、2如下 #方法一import requests from bs4 import BeautifulSoup #对bs4库中的Beautiful类引用 allUniv = []#获取界面的信息 def getHTMLText(url): try: r = requests.get(url, t ...
分类:编程语言   时间:2020-05-13 23:30:18    阅读次数:120
5.13 第一次爬虫和测试
1 import requests 2 from bs4 import BeautifulSoup 3 4 count = 0 5 for x in range(20): 6 count += 1 7 res_web = requests.get('https://www.baidu.com/') ...
分类:其他好文   时间:2020-05-13 23:28:06    阅读次数:119
挑战每分钟爬取100个视频,只要网速够快,反爬就追不到我
前言 好看视频大部分是精品短视频!相同的接口返回不同的视频给用户 今天就带大家把系统推荐的视频给爬取下来! 知识点 1、动态数据抓包演示 2、json数据解析方法 3、视频数据保存 环境介绍 python 3.6 pycharm requests json 爬虫的一般思路 1、分析目标网页,确定爬取 ...
分类:其他好文   时间:2020-05-13 21:54:02    阅读次数:100
爬取腾讯社招职位信息
腾讯社招职位(多线程+线程池) >>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>> version_1 声明:本内容仅学习参数,如有侵权,将立即删除 <<<<<<<<<<<<<<<<<<<<&l ...
分类:其他好文   时间:2020-05-13 21:51:40    阅读次数:78
request
1. 介绍 对了解一些爬虫的基本理念,掌握爬虫爬取的流程有所帮助。入门之后,我们就需要学习一些更加高级的内容和工具来方便我们的爬取。那么这一节来简单介绍一下 requests 库的基本用法 2. 安装 利用 pip 安装 3. 基本请求 3.1 get请求 参数是字典,我们也可以传递json类型的参 ...
分类:其他好文   时间:2020-05-13 20:06:28    阅读次数:49
python任务25-第一个爬虫和测试
一: 用requests 多次访问百度主页内容,打印返回状态,text内容,计算text属性和cotent属性所返回网页内容的长度 import requests r=requests.get("http://www.baidu.com") r.encoding="UTF-8" for i in r ...
分类:编程语言   时间:2020-05-13 17:22:57    阅读次数:75
第一个爬虫
(2)用get()函数访问一个网站20次,打印返回状态,text()内容,计算text()属性和content()属性所返回的网页内容长度。 import requests r=requests.get("https://www.so.com/") r.encoding="UTF-8" for i ...
分类:其他好文   时间:2020-05-13 17:05:56    阅读次数:47
5272条   上一页 1 ... 45 46 47 48 49 ... 528 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!