一、windows 安装 1、下载spark spark-2.3.1-bin-hadoop2.7.tgz 2、配置spark 环境变量 set SPARK_HOME=d:\spark2.3.1 set PATH=%SPARK_HOME%\bin;%PATH% 3、安装python的pyspark模块... ...
Open vSwitch 概述Open vSwitch是由Nicira Networks主导的,运行在虚拟化平台上的虚拟交换机。OVS可以动态变化的端点提供2层交换功能,很好的控制虚拟网络中访问策略、网络隔离、流量监控等等。OVS遵循Apache2.0许可证,能同时支持多种标准的管理接口和协议。OVS也提供对OpenFlow协议的支持,用户可以使用任何OpenFlow协议的控制器对OVS进行远程管
分类:
其他好文 时间:
2018-07-23 11:01:45
阅读次数:
195
标注:官网下载zabbix安装包(zabbix安装包里包含了zabbix_agentd客户端安装包,我们只选择zabbix_agentd客户端安装) zbbix官网下载地址: http://www.zabbix.com/download 客户端操作 提示:Linux软件编译安装都需要依赖两个安装包 ...
分类:
系统相关 时间:
2018-07-19 18:11:51
阅读次数:
357
Supervisor安装与配置(linux/unix进程管理工具) Supervisor(http://supervisord.org/)是用Python开发的一个client/server服务,是Linux/Unix系统下的一个进程管理工具,不支持Windows系统。它可以很方便的监听、启动、停止 ...
分类:
其他好文 时间:
2018-07-18 19:12:14
阅读次数:
209
一、Spark支持的安装模式: 1、伪分布式(一台机器即可) 2、全分布式(至少需要3台机器) 二、Spark的安装配置 1、准备工作 安装Linux和JDK1.8 配置Linux:关闭防火墙、主机名、免密码登陆 2、安装部署Spark 解压:tar z-xvf spark-2.1.0-bin-ha ...
分类:
其他好文 时间:
2018-07-15 13:50:23
阅读次数:
143
Linux操作系统是基于UNIX操作系统发展而来的一种克隆系统,它诞生于1991 年的 [Linux桌面] 10 月5 日以后借助于Internet网络,并通过全世界各地计算机爱好者的共同努力,已成为今天世界上使用最多的一种UNIX 类操作系统,并且使用人数还在迅猛增长。
分类:
系统相关 时间:
2018-07-15 00:16:46
阅读次数:
239
如果你看完有信心能坚持学习的话,那就当下开始行动吧!一、大数据技术基础1、linux操作基础linux系统简介与安装linux常用命令–文件操作linux常用命令–用户管理与权限linux常用命令–系统管理linux常用命令–免密登陆配置与网络管理linux上常用软件安装linux本地yum源配置及yum软件安装linux防火墙配置linux高级文本处理命令cut、sed、awklinux定时任务
分类:
其他好文 时间:
2018-07-13 16:24:50
阅读次数:
190
MongoDB简介MongoDB是由C++语言编写的,是一个基于分布式文件存储的开源数据库系统。在高负载的情况下,添加更多的节点,可以保证服务器性能。MongoDB旨在为WEB应用提供可扩展的高性能数据存储解决方案。MongoDB将数据存储为一个文档,数据结构由键值(key=>value)对组成。MongoDB文档类似于JSON对象。字段值可以包含其他文档,数组及文档数组。MongoDB主要
分类:
数据库 时间:
2018-07-13 16:21:19
阅读次数:
227
环境:CentOS764位2台centos7-1192.168.190.130mastercentos7-2192.168.190.129slave1hadoop下载地址:http://mirrors.hust.edu.cn/apache/hadoop/common/选则3.1.0版本在安装之前需要先实现节点之间的免密码登陆1)去掉/etc/ssh/sshd_config中的两行注释,如没有则添加
分类:
其他好文 时间:
2018-07-12 10:29:35
阅读次数:
215