前言 随着大型网站反扒机制的增强，更改IP登陆已经成为一种最高效的方式，为此打造一款超强IP池项目，采用最新最快的Python技术——异步（Async ）。编写了一个免费的异步爬虫代理池，以 Python asyncio 为基础，充分利用 Python 的异步性能，异步处理比同步处理能提升成百上千倍 ...
分类：
其他好文 时间：
2020-08-15 23:56:25
阅读次数：
119
一、MacVlan实现Docker的跨主机网络通信的方案有很多，如之前博文中写到的通过部署Consul服务实现Docker容器跨主机通信Macvlan工作原理：Macvlan是Linux内核支持的网络接口。要求的Linux内部版本是v3.9–3.19和4.0+；通过为物理网卡创建Macvlan子接口，允许一块物理网卡拥有多个独立的MAC地址和IP地址。虚拟出来的子接口将直接暴露在相邻物理网络中。从
分类：
其他好文 时间：
2020-08-05 19:46:59
阅读次数：
67
一、HDFS-HA集群配置 1.环境准备 1. 修改IP 2. 修改主机名及主机名和IP地址的映射 3. 关闭防火墙 4. ssh免密登录 5. 安装JDK，配置环境变量等 2.规划集群 hadoop102 hadoop103 hadoop104 NameNode NameNode JournalN ...
分类：
其他好文 时间：
2020-07-28 22:19:09
阅读次数：
77
8.3 HDFS-HA集群配置 8.3.1 环境准备 1. 修改IP 2. 修改主机名及主机名和IP地址的映射 3. 关闭防火墙 4. ssh免密登录 5. 安装JDK，配置环境变量等 8.3.2 规划集群 表3-1 hadoop102 hadoop103 hadoop104 NameNode Na ...
分类：
其他好文 时间：
2020-07-26 23:10:23
阅读次数：
85
简介Ganglia是UCBerkeley发起的一个开源集群监视项目，设计用于测量数以千计的节点,Ganglia的核心包含gmond、gmetad以及一个Web前端。主要是用来监控系统性能，如：cpu、mem、硬盘利用率，I/O负载、网络流量情况等，通过曲线很容易见到每个节点的工作状态，对合理调整、分配系统资源，提高系统整体性能起到重要作用工作原理gmetad可以部署在集群内任一台节点或者通过网络连
分类：
其他好文 时间：
2020-07-22 11:49:09
阅读次数：
91
jdk的安装 上传jdk的安装包到linux中 解压、更名 [root@qianfeng01 software]# tar -zxvf jdk-8u221-linux-x64.tar.gz -C /usr/local/ [root@qianfeng01 software]# cd /usr/loca ...
分类：
其他好文 时间：
2020-07-19 17:54:49
阅读次数：
72
Windows下用命令行修改IP地址的方法详解(附批处理文件) 由于我所处的地方要经常在不同的网络之间切换，比如局域网、系统内部网和外网（光是外网我要常常在3个ADSL网之间切换）。我之前一直用的方法是在本机上设置多个不同网段的IP，然后切换路由（Route），这样不同的网段通过不同的网关出去，就可 ...
若需要重新安装（拷贝虚拟机文件移植到其他地方使用） 1)更改IP配置文件/etc/sysconfig/network-scripts/ifcfg-ens33网段需要与物理网卡网段一致； vim /etc/sysconfig/network-scripts/ifcfg-ens33 IPADDR=192 ...
分类：
其他好文 时间：
2020-07-07 17:36:44
阅读次数：
66
修改 IP 和 Gateway esxcli network ip interface ipv4 set -i vmk0 -I 10.124.29.32 -N 255.255.255.0 -g 10.124.29.1 -t static ...
分类：
其他好文 时间：
2020-06-24 22:02:22
阅读次数：
65
