在进行爬虫的过程当中，我们经常会遇到被封IP的情况，因此我们可以搜集一些代理IP，然后使用程序去测试哪些代理IP是可用的,我在这里使用了请求如下网站的方法： http://icanhazip.com/ 请求这个网站之后，如果请求成功，没有遇到异常，就会返回当前你请求这个网站的IP地址。同时保存到一个 ...
分类：
编程语言 时间：
2021-02-09 12:20:54
阅读次数：
0
浏览器线程 一般来讲，一个程序一个进程，例如：低版本IE。Chrome为提高速度和保证访问一个有问题的页面，页面奔溃不影响其他的页面，采用沙箱技术。是一个网页一个进程，这也是Chrome吃内存的原因所在）。 浏览器包含有以下线程： GUI渲染线程 ? 负责渲染浏览器界面，解析HTML，CSS，构建D ...
分类：
编程语言 时间：
2021-02-09 12:11:16
阅读次数：
0
引子： flask中的request 在单进程单线程中没有问题，但是性能肯定是下降的，如果强制开启多线程，会导致线程不安全。但是threading.local() 方法支持多线程，但是不支持多协程 代码： # -*- coding: utf-8 -*- """ threadlocal 上下问管理 源 ...
分类：
其他好文 时间：
2021-02-09 11:46:54
阅读次数：
0
首先，并不推荐这样做，一个Docker本身只该运行一个服务 问题 有一次我需要在一个docker容器中运行两个web server。并且需要写在Dockerfile中，让用户一启动容器，两个web server就都运行。 如果在Dockerfile最后直接加一个RUN webrun.py的话，只能启 ...
分类：
Web程序 时间：
2021-02-08 12:29:27
阅读次数：
0
为什么需要存活探针 如果没有探针，k8s无法知道应用是否还活着，只要进程还在运行，k8s则认为容器是健康的。 k8s容器探测机制 http get 对容器的ip地址(指定的端口和路径)执行http get请求 如果探测器收到响应，并且响应码是2xx, 3xx，则认为探测成功。如果服务器没有响应或者返 ...
分类：
其他好文 时间：
2021-02-08 12:04:43
阅读次数：
0
一、磁盘情况查询 1、查看磁盘整体情况 命令：df 参数： -a：列出所有的文件系统，包括系统特有的/proc等文件系统 -k：以KB的容量显示各文件系统 -m：以MB的容量显示各文件系统 -h：以人们较易阅读的GB,MB,KB等格式自行显示 -H：以M=1000K替代M=1024K的进位方式 -T ...
分类：
系统相关 时间：
2021-02-08 11:50:11
阅读次数：
0
Ctrl+C：复制 Ctrl+V：粘贴 Ctrl+A：全选 Ctrl+X：剪切 Ctrl+Z：撤销 Alt+F4：关闭窗口 Shift+delete：永久性删除 Win键+R：运行 Win键+E：打开我的电脑 Ctrl+Shift+Ese：打开任务管理器（软件进程） Win键+Tab：显示多个窗口 ...
分类：
其他好文 时间：
2021-02-06 12:10:14
阅读次数：
0
升级Impala 升级Impala涉及构建或获取新的Impala相关二进制文件，然后重新启动Impala服务。 升级Impala 关闭集群中所有相关主机上所有与 Impala 相关的守护进程. 停止集群中每个Impala节点上的impalad。$ sudo service impala-server ...
分类：
其他好文 时间：
2021-02-06 11:43:46
阅读次数：
0
你登录到具有性能问题的Linux服务器时，第一分钟要检查什么？ 在Netflix，我们拥有庞大的Linux EC2云实例，以及大量的性能分析工具来监视和调查它们的性能。这些工具包括Atlas和Vector。Atlas用于全云监控，Vector用于按需实例分析。这些工具能帮助我们解决大部分问题，但有时 ...
分类：
系统相关 时间：
2021-02-06 11:38:22
阅读次数：
0
多进程server端实现: import socket from multiprocessing import Process def func(conn): ''' 没调用一次func创建一个新进程 :param conn: :return: ''' try: #持续对话 while 1: dat ...
分类：
系统相关 时间：
2021-02-04 11:43:52
阅读次数：
0
