1.概述 在编写 Flink，Spark，Hive 等相关作业时，要是能快速的将我们所编写的作业能可视化在我们面前，是件让人兴奋的时，如果能带上趋势功能就更好了。今天，给大家介绍这么一款工具。它就能满足上述要求，在使用了一段时间，这里给大家分享以下使用心得。2.How to do 首先，我们来了.....
分类：
其他好文 时间：
2016-01-21 18:55:37
阅读次数：
169
从图中可以看出，Yarn的客户端需要获取hadoop的配置信息，连接Yarn的ResourceManager。所以要有设置有YARN_CONF_DIR或者HADOOP_CONF_DIR或者HADOOP_CONF_PATH,只要设置了其中一个环境变量，就会被读取。如果读取上述的变量失败了，那么将会选择...
分类：
其他好文 时间：
2015-12-17 01:48:57
阅读次数：
247
Flink 的流数据 API 编程指南Flink 的流数据处理程序是常规的程序 ，通过再流数据上，实现了各种转换 (比如 过滤, 更新中间状态, 定义窗口, 聚合)。流数据可以来之多种数据源 (比如, 消息队列, socket 流, 文件). 通过sink组件落地流计算的最终结果，比如可以把数据落地...
分类：
其他好文 时间：
2015-12-07 20:16:29
阅读次数：
2836
链表是驱动开发中经常遇到的一个数据结构，主要是双向循环链表；要使用链表，需要用到一个LIST_ENTRY的结构，其定义如下： typedef struct _LIST_ENTRY { struct _LIST_ENTRY *Flink; // 指向下一个节点(后继） struct _LIST_ENT...
分类：
其他好文 时间：
2015-12-05 20:59:14
阅读次数：
224
大数据何止是大，未来的世界应该是数据大爆炸，掌握数据的人才能掌握未来！模拟用户轨迹，行为分析，市场预测，spark基于内存的大数据框架。图计算，机器学习，docker，hadoop，spark，flink，，，让我们一起来追寻spark，进入大数据时代！！！spark 大数据是用scala语言，sc...
分类：
其他好文 时间：
2015-11-18 16:24:33
阅读次数：
222
大数据未来几年发展的重点方向，大数据战略已经在十八届五中全会上作为重点战略方向当前相关的项目有hadoop、Spark、Aaka、kafka、flink等等，使用语言有java、scala、python等等对大数据有兴趣者可以参考王老师提供的相关内容，具体如下：王家林的第一个中国梦：免费为全社会培养...
分类：
其他好文 时间：
2015-11-14 20:39:03
阅读次数：
393
学习了模式匹配下的For循环，用for循环遍历list中的所有元素，然后将其打印出来，应用foreach函数，应用index绑定flink,打印index；二元组，通过模式匹配打印，也可以通过类型进行模式匹配，例子如下Defmain(args:Array[string}):unit={For(i”s...
分类：
其他好文 时间：
2015-08-02 08:54:18
阅读次数：
178
MRQL is a query processing and optimization system for large-scale, distributed data analysis, built on top of Apache Hadoop, Hama, Spark, and Flink....
分类：
Web程序 时间：
2015-05-25 16:47:38
阅读次数：
176
Apache Flink简介Apache Flink是一个可伸缩的开源批处理和流处理平台。其核心模块是一个数据流引擎，该引擎在分布式的流数据处理的基础上提供数据分发、交流、以及容错的功能。...
分类：
其他好文 时间：
2015-05-25 16:37:04
阅读次数：
185
Apache Flink简介Apache Flink是一个可伸缩的开源批处理和流处理平台。其核心模块是一个数据流引擎，该引擎在分布式的流数据处理的基础上提供数据分发、交流、以及容错的功能。...
分类：
Web程序 时间：
2015-05-25 14:40:34
阅读次数：
234
