Sqoop 简介 Sqoop(发音：skup)是一款开源的工具，主要用于在Hadoop(Hive)与传统的数据库(mysql、postgresql...)间进行数据的传递，可以将一个关系型数据库（例如 ： MySQL ,Oracle ,Postgres等）中的数据导进到Hadoop的HDFS中，也可 ...
分类：
Web程序 时间：
2020-02-18 12:47:15
阅读次数：
149
1. Flume介绍 1.1 Flume Flume是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统，Flume支持在日志系统中定制各类数据发送方，用于收集数据；同时，Flume提供对数据进行简单处理，并写到各种数据接受方（可定制）的能力。 1.2 系统功能 1 ...
分类：
Web程序 时间：
2020-02-17 15:40:44
阅读次数：
95
类似： 首页： http://netsniff-ng.org/ 流量生成工具： https://www.ituring.com.cn/article/273988 TRAFGEN（8）网络工具包TRAFGEN（8） http://man7.org/linux/man-pages/man8/trafg ...
分类：
其他好文 时间：
2020-02-17 14:06:08
阅读次数：
104
转：http://www.emulatedlab.com/forum.php?mod=viewthread&tid=432&extra=page%3D1 EVE Image folder Vendor image name CPU virtual cores Single node RAM MB S ...
分类：
其他好文 时间：
2020-02-17 12:06:01
阅读次数：
628
最近，前端环境node升级到12版本，angular升级到9.0.1后，install下载依赖包配置的时候发生报错 1、 报错信息：无法加载文件C:\.....\ng.sp1,因为在此系统上禁止运行脚本 解决方案：a.搜索powershell，右键以管理员身份运行 b.若要在本地计算机上运行您编写的 ...
分类：
其他好文 时间：
2020-02-16 16:34:42
阅读次数：
103
奉为圭臬，汉语成语，拼音是fèng wéi guī niè，圭（guī）：测日影的器具。臬（niè）：射箭的靶子。圭臬：比喻事物的准则。意思是比喻把某些言论或事当成自己的准则，出自《六书音韵表序》。 1、 中文名：奉为圭臬拼 音：fèng wéi guī niè注 音：ㄈㄥˋ ㄨㄟˊ ㄍㄨㄟ ㄋㄧㄝ ...
分类：
其他好文 时间：
2020-02-16 01:04:06
阅读次数：
57
鳏寡孤惸是一个成语，读音是guān guǎ gū qióng，泛指没有劳动力而又没有亲属供养的人。惸，无兄弟。同“鳏寡孤独”。 1、 中文名：鳏寡孤惸出 处：《孟子·梁惠王下》拼 音：guān guǎ gū qióng释 义：没有劳动力而又没有亲属供养的人 目录 1 解释 2 出处 3 示例 4 词 ...
分类：
其他好文 时间：
2020-02-16 01:01:04
阅读次数：
58
这篇记录的内容来自于Andrew Ng教授在coursera网站上的授课。 1.多元线性回归(multivariate linear regression)： h函数：$h_{\theta}{(x)}=\theta_{0}+\sum_{i=1}^{n}{\theta_{i}x_{i}}$ 为方便起见 ...
分类：
其他好文 时间：
2020-02-15 09:50:40
阅读次数：
81
1、定义 Apache Flume是为有效收集聚合和移动大量来自不同源到中心数据存储而设计的可分布，可靠的，可用的系统。 Flume是一个分布式、可靠、和高可用的海量日志采集、聚合和传输的系统。 2、架构图 3、常见概念理解 ①client：客户端，运行agent的地方，每台机器只运行一个agent ...
分类：
Web程序 时间：
2020-02-14 11:00:40
阅读次数：
89
电脑修好了，但之前落下的几天博客确实没啥补的劲头，今天先写一份报告吧。 实验内容和要求 安装 Flume 安装成功。 使用 Avro 数据源测试 Flume 配置文件 启动flume agent a1 创建指定的日志文件 客户端传输 传输完成 使用 netcat 数据源测试 Flume 创建exam ...
分类：
其他好文 时间：
2020-02-13 22:48:41
阅读次数：
83
