码迷,mamicode.com
首页 >  
搜索关键字:agent    ( 4598个结果
python爬取百度百科(根据爬取的热词自动匹配相应解释)且将数据存入数据库中
import requests from lxml import etree import time, json, requests import pymysql header = { 'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) ...
分类:数据库   时间:2020-02-12 00:28:03    阅读次数:82
python学习5 爬虫老是被封如何解决
先设置等待时间: 常见的设置等待时间有两种,一种是显性等待时间(强制停几秒),一种是隐性等待时间(看具体情况,比如根据元素加载完成需要时间而等待)图 1 是显性等待时间设置,图 2 是隐性。 第二步,修改请求头: 识别你是程序还是网友浏览器浏览的重要依据就是 User-Agent,比如网友用浏览器浏 ...
分类:编程语言   时间:2020-02-12 00:16:10    阅读次数:83
windows安装consul
下载 官网下载:https://www.consul.io/downloads.html 在安装的位置解压得到 consul.exe 文件(我的解压位置是:E:\consul) 环境变量 增加一条E:\consul 启动 cmd 命令窗口执行:consul agent -dev consul 自带 ...
分类:Windows程序   时间:2020-02-10 22:49:55    阅读次数:90
爬虫 requests 和 beautiful soup 提取内容
import requestsimport timefrom bs4 import BeautifulSoupclass getContents(): # 获取html页面 def getHTMLText(self, url): try: kv = {'user-agent': 'Mozilla/5 ...
分类:其他好文   时间:2020-02-10 12:03:57    阅读次数:77
zabbix监控理论讲解
简介Zabbix是一个企业级的开源分布式监控解决方案,由C语言编写而成的底层架构(server端和agent端),由一个团队持续维护更新,软件可以自由下载使用,运作团队靠提供收费的技术支持赢利。1、Zabbix通过C/S模式采集数据,通过B/S模式在web端展示和配置。2、被监控端:主机通过安装agent方式采集数据,网络设备通过SNMP方式采集数据3、Server端:通过收集SNMP和agent
分类:其他好文   时间:2020-02-09 20:42:40    阅读次数:77
2020.2.9 解决Zabbix agent is not available&windows下安装zabbix-agent 主机部署监控
解决Zabbix agent is not available 1.浏览器登录http://192.168.0.110 如果无法登录,先关闭主机防火墙 2、接口IP不能是127.0.0.1,127.0.0.1是宿主机的。 3、查看 zabbix agent 容器的IP地址 4.点击进入Zabbix ...
分类:Windows程序   时间:2020-02-09 16:52:06    阅读次数:247
unity Failed to create agent because there is no valid NavMesh
在进行简单的导航/寻路练习时遇到这个问题 后来在 这里 找到了解决办法,原因是没有进行网格烘培Bake。 那么,我们进行简单的烘培 我的需求是只要能进行导航即可,所以只对地面进行默认烘培,点击Bake进行烘培。 重新运行就OK了。 ...
分类:编程语言   时间:2020-02-09 16:49:08    阅读次数:133
ambari安装问题-looped symbolic links found while resolving %s" % /usr/hdp/current/ranger-tagsync/conf
一、启动服务时,出现若干循环符号链接错误,比如下面是启动ranger时发生的其中一个错误信息: setup_tagsync(upgrade_type=upgrade_type) File "/var/lib/ambari-agent/cache/stacks/HDP/3.0/services/RAN ...
分类:其他好文   时间:2020-02-08 11:44:06    阅读次数:83
人才网的一个抓取,初学python,希望哥哥姐姐们多指导,多批评
from bs4 import BeautifulSoupimport urllibimport urllib.requestimport re# import json headers={"User-Agent" : "Mozilla/5.0 (compatible; MSIE 9.0; Wind ...
分类:编程语言   时间:2020-02-08 00:40:43    阅读次数:107
爬虫(自学)之User Agent 第三方库my_fake_useragent 和 fake_useragent
my_fake_useragent 和 fake_useragent实质基本一致,可以调用里面的方法User Agent 例my_fake_useragent 底层 class UserAgent(): parsed_json_data = load_parsed_json_data() def _ ...
分类:其他好文   时间:2020-02-08 00:23:38    阅读次数:76
4598条   上一页 1 ... 50 51 52 53 54 ... 460 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!