葵花宝典 flume 1. Flume组成,Put事务,Take事务 2. Flume拦截器 3. Flume Channel选择器 4. Flume监控器 5. Flume采集数据会丢失吗?(防止数据丢失的机制) 6. Flume内存 7. FileChannel优化 1. Flume组成,Put ...
分类:
Web程序 时间:
2020-10-29 10:09:33
阅读次数:
36
ng-repeat指令可以完美的显示表格。使用orderBy过滤器排序显示,可以使用orderBy过滤器:AngularJS实例<table><trng-repeat="xinnames|orderBy:‘Country‘"><td>{{x.Name}}</td><td>{{x.Country}}www
分类:
Web程序 时间:
2020-10-22 23:03:41
阅读次数:
37
Nginx整合FastDFS 先看下访问效果:http://47.101.163.73/group1/M00/00/00/rBNNhF-ATU2AT30mAAAADdhtO1M790.txt 参考链接:https://www.cnblogs.com/mrhelloworld/p/fastdfs-ng ...
分类:
其他好文 时间:
2020-10-10 16:38:42
阅读次数:
16
Nginx-vim语法目录:/nginx-1.16.1/contrib/vim/*两种方式,看vim路径决定[root@wujiabovim74]#pwd?/usr/share/vim/vim74?[root@wujiabovim74]#cp-r~/nginx-1.16.1/contrib/vim/*.cp-r~/nginx-1.16.1/contrib/vim/*~/.vim/编译安装nginx
分类:
其他好文 时间:
2020-10-08 18:39:38
阅读次数:
22
在项目中修改ng-zorro组件默认样式的一些方法: 类名等 前加::ng-deep;类名等 前加:root;类名等 前加:host /deep/;::ng-deep .ant-spin-dot i { }:host ::ng-deep .ant-spin-dot i { }:root .ant-s ...
分类:
其他好文 时间:
2020-09-24 22:05:40
阅读次数:
69
Sqoop 在hadoop和关系型数据库之间转换数据 Flume Flume是一个分布式的高可用的数据收集、聚集和移动的工具。通常用于从其他系统搜集数据,如web服务器产生的日志,通过Flume将日志写入到Hadoop的HDFS中 Canal 数据抽取是 ETL 流程的第一步。我们会将数据从 RDB ...
分类:
其他好文 时间:
2020-09-17 18:33:30
阅读次数:
37
判断44444端口是否被占用 [jason@hadoop102 flume-telnet]$ sudo netstat -tunlp | grep 44444 功能描述:netstat命令是一个监控TCP/IP网络的非常有用的工具,它可以显示路由表、实际的网络连接以及每一个网络接口设备的状态信息。 ...
分类:
Web程序 时间:
2020-09-17 18:11:23
阅读次数:
45
用户行为日志分析是实时数据处理很常见的一个应用场景,比如常见的PV、UV统计。本文将基于Flink从0到1构建一个用户行为日志分析系统,包括架构设计与代码实现。本文分享将完整呈现日志分析系统的数据处理链路,通过本文,你可以了解到:基于discuz搭建一个论坛平台Flume日志收集系统使用方式Apache日志格式分析Flume与Kafka集成日志分析处理流程架构设计与完整的代码实现项目简介本文分享会
分类:
其他好文 时间:
2020-09-11 16:03:01
阅读次数:
41
工欲善其事,必先利其器 Linux自身以及开源社区已经提供了很多工具,帮助我们快速定位问题。我们需要做的,就是在故障发生之前,确保机器上安装了这些工具,并进行适当的配置,使其正常运转,下面列举几个常用的问题诊断工具。 syslog/syslog-ng 记录系统服务进程和操作系统本身的日志,我们可以对 ...
分类:
系统相关 时间:
2020-09-11 15:56:07
阅读次数:
42
如何调用其他文件__name__=='__main__'下代码 使用os.system()或者subprocess.run()执行该文件,用这种方法相当于直接创建了一个子进程,新调用的py不影响当前调用进程。 使用runpy.run_path(,run_name='__main__')来执行文件,这 ...
分类:
其他好文 时间:
2020-08-17 16:51:33
阅读次数:
62