@ 前言-MR概述 MapReduce是一个分布式计算框架，是用户开发“基于Hadoop的数据分析应用”的核心框架。主要由两部分组成：编程模型和运行时环 境。其中，编程模型为用户提供了非常易用的编程接口，用户只需要像编写串行程序 一样实现几个简单的函数即可实现一个分布式程序，而其他比较复杂的工作，如 ...
分类：
其他好文 时间：
2021-06-02 19:46:24
阅读次数：
0
Linux安装与使用: 首先，我们要先安装虚拟机(VMware ),然后在安装Linux操作系统，Linux操作系统有很多，安装自己的需求去官网下载使用即可；我用的是Ubuntu系统； 安装虚拟机及Ubuntu系统 虚拟机安装 下载VMware： 百度搜“VMware”>应用程序和云栏里点击查看所有 ...
分类：
系统相关 时间：
2021-06-02 18:29:40
阅读次数：
0
最新VMware虚拟机安装Linux系统-CentOS(详细教程) 一、前言 最近有网友反应初学Linx不会安装，找了许多教程不是太全面，总会遇到一些要不是启动不了，要不是连不上网，各种问题，为了让大家能够顺利的安装，小乐写了一个非常详细的教程，让大家少入坑。 二、背景介绍 Linux，全称GNU/ ...
分类：
系统相关 时间：
2021-06-02 17:33:07
阅读次数：
0
我去年出了一本Python书，基于股票大数据分析的Python入门实战，在这本书里，我是用股票范例讲述Pythorn的爬虫，数据分析和机器学习知识点，如下是京东的连接。 https://item.jd.com/71486761859.html 结果前几天出版社告诉我，我的书被台湾的出版社买去版权，然 ...
分类：
编程语言 时间：
2021-06-02 15:34:50
阅读次数：
0
集群网络配置 分别设置修改主机名 master slave1 slave2 hostnamectl set-hostname 名字 分别配置/etc/hosts文件 查看openssh和rsync安装 rpm -qa | grep 名字 切换到Hadoop用户 各节点生成秘钥 ssh-keygen ...
分类：
系统相关 时间：
2021-06-02 15:27:52
阅读次数：
0
3.1 安装vm和Centos 3.11 基本说明 3.2 vmware15.5下载 3.3 vm安装的步骤 3.4 Centos的下载地址 3.5 CentOS安装的步骤 3.6 虚拟机克隆 3.7 虚拟机快照 3.7.1 应用实例 3.8 虚拟机迁移和删除 3.10 安装vmtools 3.10 ...
分类：
系统相关 时间：
2021-06-02 14:52:24
阅读次数：
0
hadoop 1.0 1. 创建用户hadoop 2. 下载： curl -o hadoop-1.2.1-bin.tar.gz https://archive.apache.org/dist/hadoop/common/hadoop-1.2.1/hadoop-1.2.1-bin.tar.gz 3. ...
分类：
其他好文 时间：
2021-06-02 14:05:53
阅读次数：
0
VMware Workstation 与 Device/Credential Guard 不兼容。在禁用 Device/Credential Guard 后，可以运行 VMware Workstation。 最主要的就是关掉这个Device Guard； 进入组策略设置来关闭Credential G ...
一、大数据分析工具——Hadoop Hadoop是一个能够对大量数据进行分布式处理的软件框架。但是Hadoop是以一种可靠、高效、可伸缩的方式进行处理的。Hadoop是可靠的，因为它假设计算元素和存储会失败，因此它维护多个工作数据副本，确保能够针对失败的节点重新分布处理。Hadoop是高效的，因为它 ...
分类：
其他好文 时间：
2021-06-02 13:17:23
阅读次数：
0
简介： 本文将会介绍Hologres基于roaringbitmap实现超高基数的UV计算 RoaringBitmap是一种压缩位图索引，RoaringBitmap自身的数据压缩和去重特性十分适合对于大数据下uv计算。其主要原理如下： 对于32bit数, RoaringBitmap会构造2^16个桶 ...
分类：
其他好文 时间：
2021-06-02 13:11:42
阅读次数：
0
