Hadoop环境搭建 #### 安装前准备 查看防火墙状态,若处于激活(inaction)状态,关闭防火墙 sudo ufw status 查看时间服务器是否运行,若NTP尚未安装就运行安装命令 dpkg -l | grep ntp #检查是否安装 apt-get install ntp #NTP安 ...
分类：
其他好文 时间：
2020-09-17 21:43:01
阅读次数：
32
大数据分析平台的搭建有利于帮助企业构建统一的数据存储和数据处理资源，围绕企业业务开展大数据应用建设，最终形成面向服务化的数据资产。而今天我们就来了解一下，常见的大数据平台都包含哪些层次？ 1、数据采集层：分3个层面的采集技术进行支持，一是传统业务系统数据库和半结构化、结构化数据的采集和集成，如采用Sqoop技术进行关系数据库和Hadoop系统之间的数据抽取和交换;二是交通实时流数据的采集，包
分类：
其他好文 时间：
2020-09-17 20:18:31
阅读次数：
34
大数据分析平台的搭建有利于帮助企业构建统一的数据存储和数据处理资源，围绕企业业务开展大数据应用建设，最终形成面向服务化的数据资产。而今天我们就来了解一下，常见的大数据平台都包含哪些层次？ 1、数据采集层：分3个层面的采集技术进行支持，一是传统业务系统数据库和半结构化、结构化数据的采集和集成，如采用Sqoop技术进行关系数据库和Hadoop系统之间的数据抽取和交换;二是交通实时流数据的采集，包
分类：
其他好文 时间：
2020-09-17 19:57:01
阅读次数：
24
1.理解socket Socket是应用层与TCP/IP协议族通信的中间软件抽象层，它是一组接口。在设计模式中，Socket其实就是一个门面模式，它把复杂的TCP/IP协议族隐藏在Socket接口后面，对用户来说，一组简单的接口就是全部，让Socket去组织数据，以符合指定的协议。 站在使用者的角度 ...
分类：
编程语言 时间：
2020-09-17 19:47:20
阅读次数：
36
https://www.a5idc.net/如何在Linux和Unix类系统（如macOS或FreeBSD桌面）上使用ssh-agent命令进行非交互式身份验证？我的私钥是用口令或密码保护的。所以我需要输入口令才能多次使用ssh私钥进行验证。我怎样才能让ssh只询问一次口令？你需要使用ssh-agent命令。它将保存你用于ssh公钥认证的私钥。换句话说，ssh-agen会记住并暂时将口令存储在内存
分类：
系统相关 时间：
2020-09-17 18:25:19
阅读次数：
39
环境：host1----------->firewalld---------->host2---------->host3(80)目的1：host1穿过防火墙通过host2跳转访问host3，属于本地端口转发要求：此方法，需要firewalld开启22端口方法：ssh-L8888:hosts3:80host2（在host1执行）思路：将host1作为ssh客户端，host2作为s
分类：
其他好文 时间：
2020-09-17 18:24:59
阅读次数：
36
使用rsync进行简单的数据远程备份脚本 一、实验环境：1、centos-A网站服务器：192.168.0.101/24提前准备好网站源代码和数据库2、centos-B备份服务器：192.168.0.102/24 二、ssh客户端centos-A生成公钥和私钥对ssh-keygen -t rsa 命 ...
分类：
其他好文 时间：
2020-09-17 18:16:25
阅读次数：
34
两个节点分别执行 1.su - grid 2.cd $HOME/.ssh 3.rm -rf * 4.图形化界面重新setup 5.test成功 参考链接：https://blog.csdn.net/tan88881111/article/details/80407620 参考文档： Clean up ...
分类：
数据库 时间：
2020-09-17 16:31:20
阅读次数：
69
