1. 开发环境1.1. 软件包下载1.1.1. JDK下载地址http://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html安装到 D:\GreenSoftware\Java\Java8X64\j... ...
分类：
Web程序 时间：
2018-05-04 13:58:23
阅读次数：
503
参考文档 Migrating to ML-Agents v0.3 Getting Started with the 3D Balance Ball Environment Training ML-Agents ml-agent v0.2：Win10下环境安装 前言 近段时间，ml-agent升级到了 ...
分类：
Windows程序 时间：
2018-05-03 00:56:18
阅读次数：
1305
1.首先你需要知道flume的http监控如果启动 请参考博文 Flume的监控参数 即在 http://localhost:3000/metrics 可以访问到如下内容 2.在open-falcon中安装flume监控插件，参考官方文档 http://book.open-falcon.org/zh ...
分类：
Web程序 时间：
2018-05-02 13:08:22
阅读次数：
519
接到个小需求，将mysql的部分数据增量同步到es，但是不仅仅是使用canal而已，整体的流程是mysql canal flume kafka es，说难倒也不难，只是做起来碰到的坑实在太多，特别是中间套了那么多中间件，出了故障找起来真的特别麻烦。 先来了解一下MySQL的主从备份： 从上层来看，复 ...
分类：
其他好文 时间：
2018-04-29 16:24:39
阅读次数：
398
Spark Streaming 1、课程目标 1、掌握sparkStreaming底层原理和架构 2、掌握DStream的原理 3、掌握sparkStreaming与flume整合 4、掌握sparkStreaming与kafka整合 1、掌握sparkStreaming底层原理和架构 2、掌握DS ...
分类：
其他好文 时间：
2018-04-29 01:14:55
阅读次数：
267
首先是关于flume的基础介绍 组件名称 功能介绍 Agent代理 使用JVM 运行Flume。每台机器运行一个agent，但是可以在一个agent中包含多个sources和sinks。 Client客户端 生产数据，运行在一个独立的线程。 Source源 从Client收集数据，传递给Channe ...
分类：
Web程序 时间：
2018-04-28 19:25:54
阅读次数：
336
原文链接：https://github.com/Unity-Technologies/ml-agents/blob/master/docs/Installation.md 安装和设置 要安装和使用ML-Agents，您需要安装Unity，克隆这个存储库并安装Python以及其他依赖项。除了Docke ...
分类：
其他好文 时间：
2018-04-28 14:03:24
阅读次数：
1462
在具体介绍本文内容之前，先给大家看一下Hadoop业务的整体开发流程： 从Hadoop的业务开发流程图中可以看出，在大数据的业务处理过程中，对于数据的采集是十分重要的一步，也是不可避免的一步，从而引出我们本文的主角—Flume。本文将围绕Flume的架构、Flume的应用(日志采集)进行详细的介绍。 ...
分类：
Web程序 时间：
2018-04-27 19:59:48
阅读次数：
277
1、首先判断pc端还是移动端。 function IsPC() { var userAgentInfo = navigator.userAgent; var Agents = ["Android", "iPhone", "SymbianOS", "Windows Phone", "iPad", "i ...
分类：
其他好文 时间：
2018-04-27 13:26:14
阅读次数：
176
SinkProcessor： ============================ FailOver： Load balancing ： //负载均衡处理器 //round_robin 轮询 1-2-3-1-2-3-... //random 随机 1-3-2-3-1-... ... ...
分类：
Web程序 时间：
2018-04-25 20:09:18
阅读次数：
198
