大数据技术正飞速地发展着，催生出一代又一代快速便捷的大数据处理引擎，无论是Hadoop、Storm，还是后来的Spark、Flink。然而，毕竟没有哪一个框架可以完全支持所有的应用场景，也就说明不可能有任何一个框架可以完全取代另一个。今天，将从几个项出发着重对比Spark与Flink这两个大数据处理 ...
分类：
其他好文 时间：
2019-03-28 15:41:15
阅读次数：
127
问题描述如下： 这个错误提示其实是webstorm的变量语法检查提示，修改一下它的配置就好了。 1.点击Webstorm右下角的小人，点击Configure inspections 2.在搜索框中输入javascript general unused,取消勾选Unused global symbol ...
分类：
其他好文 时间：
2019-03-28 09:43:26
阅读次数：
1023
对Spark、Storm以及Spark Streaming引擎的简明扼要、深入浅出的比較。原文发表于踏得网。Spark基于这种理念，当数据庞大时，把计算过程传递给数据要比把数据传递给计算过程要更富效率。每一个节点存储（或缓存）它的数据集。然后任务被提交给节点。所以这是把过程传递给数据。这和Hadoo ...
分类：
其他好文 时间：
2019-03-28 09:36:20
阅读次数：
149
第一步 右击package.json文件，点击show npm Scripts 第二步 出现npm面板 第三步 点击即可运行任务 ...
分类：
Web程序 时间：
2019-03-26 15:03:49
阅读次数：
350
Java:继续上周的内容，把一维数组变成可循环（没有头跟尾），求最大子数组。解决方案：将一个一维数组扩大两倍，头与尾相连； 课后扩展，将一维数组变成二维数组，求最大子数组。将问题细分：先解决如何判断为二维数组的子数组，再比较大小。 PHP课：安装上PHP storm编写简单的页面转化进制。 数据库: ...
分类：
其他好文 时间：
2019-03-25 01:16:29
阅读次数：
184
php的面相对象 1 <?php 2 3 4 class Hello 5 { 6 public function say_hello() 7 { 8 echo "hello"; 9 } 10 } 11 12 $say = new Hello(); 13 $say->say_hello(); 先使用关 ...
分类：
Web程序 时间：
2019-03-23 10:35:45
阅读次数：
256
require 文件很麻烦，使用PSR-4搭配composer一次加载，终生受用。 感觉类似java中的import了，自己先记录一下最近理解的。 用composer管理自己的包吧 安装composer 这个不多赘述 英文版教程 中文版教程 PSR-4规范 PSR-4-autoloader 构建项目 ...
分类：
其他好文 时间：
2019-03-22 19:03:46
阅读次数：
270
我推荐的公众号是【stormzhang】，技术领域里非常有影响力的个人公众号。 定位 首先讲讲定位。这个公众号早期是专注技术分享的，所以吸引了一大波铁杆粉丝，这些粉丝可以说是奠定了这个公众号崛起的基础。后来随着该号主个人的职位提高，公众号的影响力也随之水涨船高。同时，该公众号也跟随着号主的眼界而转型 ...
分类：
其他好文 时间：
2019-03-20 20:31:40
阅读次数：
207
StormUI 无法获取数据，ambari-server 日志中提示 “SPNego authentication failed, can not get hadoop.auth cookie”
分类：
其他好文 时间：
2019-03-20 17:29:52
阅读次数：
156
一 Kafka 概述1.1 Kafka 是什么在流式计算中，Kafka 一般用来缓存数据，Storm 通过消费 Kafka 的数据进行计算。1）Apache Kafka 是一个开源消息系统（微信公众号、QQ、微信等群），由 Scala 写成。是由 Apache 软件基金会开发的一个开源消息系统项目。 ...
分类：
其他好文 时间：
2019-03-19 17:09:41
阅读次数：
558
