docker环境搭建 1.数据源准备 curl -fsSL get.docker.com -o get-docker.sh 2.docker CE 下载及安装 下载:sh get-docker.sh --mirror Aliyun 刷新:systemctl daemon-reload 启动:syst ...
分类:
其他好文 时间:
2020-09-18 00:16:28
阅读次数:
38
hive是基于Hadoop的一个数据仓库工具,用来进行数据的ETL,这是一种可以存储、查询和分析存储在Hadoop中的大规模数据的机制。hive能将结构化的数据文件映射为一张数据库表,并提供SQL查询功能。HiveSQL是一种类SQL语言,与关系型数据库所支持的SQL语法存在微小的差异。本文对比MySQL和Hive所支持的SQL语法,发现相同的SQL语句在Hive和MySQL中输出结果的会有所不同
分类:
数据库 时间:
2020-09-17 23:41:17
阅读次数:
49
1 简介
2 环境搭建
3 if判断
4 where查询条件
5 trim自定义字符串截取
6 choose分支选择
7 set更新
8 foreach遍历
9 MySQL下的foreach批量插入的两种方式
10 Oracle下的foreach批量插入的两种方式
11 内置参数
12 bind绑定... ...
分类:
数据库 时间:
2020-09-17 23:35:24
阅读次数:
41
实验包括:1.使用EMR创建Hadoop集群2.定义schema,创建示例表。3.通过HiveQL分析数据,并将分析结果保存到S3上4.下载已经分析结果数据。Task1:创建一个S3桶创建一个存储桶比如hadoop202006…Task2:创建EMR集群这里我解释一下Hadoop集群中的一些组件,了解大数据的同学直接忽略就好。ApacheHadoop:在分布式服务器集群上存储海量数据并运行分布式分
分类:
其他好文 时间:
2020-09-17 22:02:51
阅读次数:
37
Hadoop环境搭建 #### 安装前准备 查看防火墙状态,若处于激活(inaction)状态,关闭防火墙 sudo ufw status 查看时间服务器是否运行,若NTP尚未安装就运行安装命令 dpkg -l | grep ntp #检查是否安装 apt-get install ntp #NTP安 ...
分类:
其他好文 时间:
2020-09-17 21:43:01
阅读次数:
32
1、环境搭建 #1、安装node (node -v查询版本号) node 安装 官网下载安装 #2、安装淘宝镜像 npm install -g cnpm --registry=https://registry.npm.taobao.org #3、安装 webpack,以全局的方式安装 npm ins ...
分类:
其他好文 时间:
2020-09-17 21:04:48
阅读次数:
79
大数据分析平台的搭建有利于帮助企业构建统一的数据存储和数据处理资源,围绕企业业务开展大数据应用建设,最终形成面向服务化的数据资产。而今天我们就来了解一下,常见的大数据平台都包含哪些层次? 1、数据采集层:分3个层面的采集技术进行支持,一是传统业务系统数据库和半结构化、结构化数据的采集和集成,如采用Sqoop技术进行关系数据库和Hadoop系统之间的数据抽取和交换;二是交通实时流数据的采集,包
分类:
其他好文 时间:
2020-09-17 20:18:31
阅读次数:
34
本文参考 [**嗨客网**](https://haicoder.net) 的 [**Python教程**](https://haicoder.net/python/python-tutorial.html)
`Python` `python是什么` `python教程`
`python3 ` `python 下载` `python 安装`
`python核心编程`
# **Python学习路线**
## **前言**
我们在学习一门编程语言,最开始拥有一个清晰的学习路线,是十分重要的,只有知道了自己需要学什么,才能更好的激发学习的激情。学习就像是我们在玩游戏时去打副本,而学习路线就如同主线任务一般,在主线任务中能够知道这个副本有哪些装备,知道这些装备的属性加成,能够一步一步提升自己的等级。
当学习了 N+ 个知识点后,我们会感觉到一丝混乱,不知道这些东西,到底有什么用?那么此时看一下学习路线,将这些知识点串起来,这时候会有意想不到的结果!
本专题是关于 Python 的学习路线,此专题可以为初学 Python 的小白提供一个更加清晰的学习路线。
分类:
编程语言 时间:
2020-09-17 20:17:17
阅读次数:
32
大数据分析平台的搭建有利于帮助企业构建统一的数据存储和数据处理资源,围绕企业业务开展大数据应用建设,最终形成面向服务化的数据资产。而今天我们就来了解一下,常见的大数据平台都包含哪些层次? 1、数据采集层:分3个层面的采集技术进行支持,一是传统业务系统数据库和半结构化、结构化数据的采集和集成,如采用Sqoop技术进行关系数据库和Hadoop系统之间的数据抽取和交换;二是交通实时流数据的采集,包
分类:
其他好文 时间:
2020-09-17 19:57:01
阅读次数:
24
本文参考 [嗨客网](https://haicoder.net) 的 [Go语言教程](https://haicoder.net/golang/golang-tutorial.html)
关键词:
`Go语言` `go语言开发` `go语言下载` `go语言编程` `go语言教程`
Golang学习路线
前言
我们在学习一门编程语言,最开始拥有一个清晰的学习路线,是十分重要的,只有知道了自己需要学什么,才能更好的激发学习的激情。学习就像是我们在玩游戏时去打副本,而学习路线就如同主线任务一般,在主线任务中能够知道这个副本有哪些装备,知道这些装备的属性加成,能够一步一步提升自己的等级。
当学习了 N+ 个知识点后,我们会感觉到一丝混乱,不知道这些东西,到底有什么用?那么此时看一下学习路线,将这些知识点串起来,这时候会有意想不到的结果!
本专题是关于 Golang 的学习路线,此专题可以为初学 Golang 的小白提供一个更加清晰的学习路线。
分类:
编程语言 时间:
2020-09-17 19:05:19
阅读次数:
90