1. 设置执行引擎 set hive.execution.engine=mr;set hive.execution.engine=spark; 如果设置执行引擎为MR，那么调用Hadoop的maprecude来运行需要执行的job的程序； 如果设置执行引擎为spark，那么就会调用spark来执行任 ...
分类：
其他好文 时间：
2021-01-15 12:15:21
阅读次数：
0
解决Hadoop HA集群 NameNode 无法自动故障转移（切换active） 在学习 HA 自动化配置，按照hadoop官网:https://hadoop.apache.org/docs/stable/hadoop-project-dist/hadoop-hdfs/HDFSHighAvaila ...
分类：
其他好文 时间：
2021-01-15 12:13:12
阅读次数：
0
###1.下载 centos7 下载地址 ###2.安装VMware 过程参考网上安装 ###3.安装centos 点击新建虚拟机->典型安装->选择ios安装位置->linux centos 64位置->设置硬盘大小->自定义硬件->->->->-> 硬件设置如下: cpu:数量1，核心2 内存: ...
分类：
其他好文 时间：
2021-01-14 11:24:26
阅读次数：
0
一、概述 当VMware vSphere基础架构搭建好后，如何把现有跑在物理机上的应用迁移到虚拟机上呢？这就需要请出VMware vCenter Converter这个工具，此工具可以实现P2V（物理机在线或离线迁移到虚拟机）、V2V（VMware各虚拟机产品之间或和hyper-V之间的转换），以及 ...
分类：
系统相关 时间：
2021-01-14 11:09:11
阅读次数：
0
热身30题 1.描述一下HDFS的写流程 2.描述一下HDFS的读流程 3.详细讲解一下HDFS的体系结构 4.如果一个datanode出现宕机，恢复流程是什么样的？ 5.通常你是如何解决Haddop的NameNode宕机的，流程是什么？ 6.描述一下NameNode对元数据的管理 7.NameNo ...
分类：
其他好文 时间：
2021-01-14 10:47:06
阅读次数：
0
虚拟机克隆 a. vim /etc/udev/rules.d/70-persistent-net.rules 更改网卡名 b. vim /etc/sysconfig/network-scripts/ifcfg-eth0 更新网卡 c. vim /etc/sysconfig/network 更改主机名 ...
分类：
其他好文 时间：
2021-01-12 10:50:26
阅读次数：
0
原文链接:https://blog.csdn.net/qq_26803795/article/details/106522611 文章目录 一、前言 二、内置分词器解析 2.1、内置分词器梳理 2.2、内置分词器对中文的局限性 三、安装IK分词器 3.1、下载IK分词器 3.2、编译源码包 3.3、 ...
分类：
其他好文 时间：
2021-01-12 10:47:41
阅读次数：
0
搭建在单一服务器 基于官方文档 http://hadoop.apache.org/docs/r2.7.2/hadoop-project-dist/hadoop-common/SingleCluster.html#Pseudo-Distributed_Operation 1、配置：hadoop-env ...
分类：
其他好文 时间：
2021-01-11 11:23:14
阅读次数：
0
public static IFeatureClass FeatureToFeature(IFeatureClass SourFeature,IFeatureClass TargetFeature, List<ColumnInternationMapping> columnMapp,bool IsO ...
分类：
其他好文 时间：
2021-01-11 11:06:09
阅读次数：
0
由于Linux目前很热门，越来越多的人在学习Linux，但是买一台服务放家里来学习，实在是很浪费。那么如何解决这个问题？虚拟机软件是很好的选择，常用的虚拟机软件有VMware Workstations和VirtualBox等。在使用虚拟机软件的时候，很多初学者都会遇到很多问题，而VMware的网络连 ...
分类：
系统相关 时间：
2021-01-11 10:28:51
阅读次数：
0
