mkdir/jenkins&&cd/jenkinsyum-yinstalljava-1.8.0-openjdk-headless-1.8.0.242.b08-0.el7_7.x86_64java-1.8.0-openjdk-1.8.0.242.b08-0.el7_7.x86_64javapackages-tools-3.4.1-11.el7.noarchjava-1.8.0-ope
分类：
其他好文 时间：
2020-04-24 01:09:15
阅读次数：
48
在使用scrapy抓取网页时, 如果遇到使用js动态渲染的页面, 将无法提取到在浏览器中看到的内容. 针对这个问题scrapy官方给出的方案是scrapy selenium, 这是一个把selenium集成到scrapy的开源项目, 它使用selenium抓取已经渲染好(js代码已经执行完成)的动态 ...
分类：
Web程序 时间：
2020-03-31 22:37:31
阅读次数：
99
本文将会讲到下列内容： 1、制作镜像 2、编排容器 显然，上次做的不好，如果移植的话，python3还是需要重新安装，这显然不符合我们的初衷。那么，把依赖的python3也做成镜像吧。 一、制作python3镜像 1、拉去最新python镜像：docker pull python （我这因为已经拉取 ...
分类：
编程语言 时间：
2020-03-14 21:59:51
阅读次数：
173
问题：selenium已经放弃PhantomJS，建议使用火狐或者谷歌无界面浏览器。 解决方案1： selenium版本降级 通过pip install selenium默认安装版本。 （通过pip show selenium显示版本）将其卸载pip uninstall selenium，重新安装并 ...
分类：
Web程序 时间：
2020-02-22 14:19:20
阅读次数：
174
一、概念 ClusterIP：例如svc所分配的ip地址 NodePort：k8s集群物理机机通信地址，client NodeIP:NodePort ClusterIP:ServicePort PodIP:containerPort No ClusterIP：Headless Service ，Se ...
分类：
Web程序 时间：
2020-02-14 20:55:29
阅读次数：
84
1、 2、 // puppeteer元素基本操作-输入文本与元素点击 const puppeteer = require('puppeteer') async function fun() { const browser = await puppeteer.launch({ headless: fa ...
分类：
其他好文 时间：
2020-01-31 10:55:04
阅读次数：
108
前面配置了servcie的nodepoint和clusterIP附在均衡 一 headless service配置 1.1 默认下的DNS配置 [root@docker-server1 deployment]# kubectl get svc NAME TYPE CLUSTER-IP EXTERNA ...
分类：
Web程序 时间：
2020-01-15 22:41:06
阅读次数：
113
from selenium import webdriver import time from selenium.webdriver.chrome.options import Options #创建一个参数对象，用来控制Chrome以无界面模式打开 chrome_options = Options ...
分类：
其他好文 时间：
2020-01-12 18:00:26
阅读次数：
72
端口占用导致的，修改下，或者启动时取消远程debug配置。 JAVA_OPTS="-server -Xms512m -Xmx1024m -XX:PermSize=256M -XX:MaxNewSize=512m -XX:MaxPermSize=1024m -Djava.awt.headless=tr ...
分类：
其他好文 时间：
2020-01-10 12:54:49
阅读次数：
80
无头浏览器即为Headless Browser，是没有图形用户界面的web浏览器，通常是通过编程或命令行界面来控制。在正常使用selenium的时候，你必须担心CPU和/或内存的使用。这两种方式都与必须从被请求的URL中显示显示的图形的浏览器相关联。当使用一个无头的浏览器时，我们不用担心这个。因此， ...
分类：
其他好文 时间：
2020-01-08 16:08:17
阅读次数：
115
