Storm主要的应用场景就是流式数据处理，例如实时推荐系统，实时监控系统等。 storm中的相关概念 在storm中，分布式的计算结构指的是一个topology(拓扑)，一个topology由流式数据，spouts(流生产者)，以及bolts(具体操作者)组成。Storm的topologies和其他 ...
分类：
其他好文 时间：
2019-05-22 23:59:07
阅读次数：
282
场景 在使用phpstorm等IDE编辑器编写php代码时，为了更方便的调试，我们需要安装一款php的扩展插件 xdebug。本实例当前运行环境为phpstudy集成环境。 步骤 游览器输入网址：https://xdebug.org或者直接搜索xdebug进入网站。 点击下方download进入下载 ...
分类：
Web程序 时间：
2019-05-20 23:02:15
阅读次数：
303
1、实时处理框架 即从上面的架构中我们可以看出，其由下面的几部分构成： Flume集群 Kafka集群 Storm集群 从构建实时处理系统的角度出发，我们需要做的是，如何让数据在各个不同的集群系统之间打通（从上面的图示中也能很好地说明这一点），即需要做各个系统之前的整合，包括Flume与Kafka的 ...
分类：
Web程序 时间：
2019-05-20 21:21:03
阅读次数：
275
换了个公司，有一个非常不错的lab。试着自己搭一个安全的试验台。老规矩，blog用来把很多步骤，容易遗忘的东西记录下来，日后方便查阅。topology莫名其妙烂了个UCS刀片，我又控制不了什么，那正好一个个安装过程都截图下来把。Windows2016安装部分会充当DNS，DomainController，CA服务器。参考视频，https://www.youtube.com/watch?v=hxMS
分类：
其他好文 时间：
2019-05-19 20:50:26
阅读次数：
201
Apache Flume is a distributed, reliable, and available system for efficiently collecting, aggregating and moving large amounts of log data from many d ...
分类：
Web程序 时间：
2019-05-13 12:39:39
阅读次数：
131
1.卡夫卡与风暴的区别 今天，在本文中，“Apache Kafka vs Storm：Storm和Kafka之间的差异”我们将看到Kafka和Storm的完整比较。那么，让我们从Kafka和Storm 的简要介绍开始，以便更好地理解比较。 卡夫卡与风暴：卡夫卡和风暴的特征明智比较 卡夫卡与风暴：卡夫 ...
分类：
其他好文 时间：
2019-05-12 18:26:14
阅读次数：
221
[TOC] storm的分组策略 洗牌分组(Shuffle grouping): 随机分配元组到Bolt的某个任务上，这样保证同一个Bolt的每个任务都能够得到相同数量的元组。 字段分组(Fields grouping): 按照指定的分组字段来进行流的分组。例如，流是用字段“user id"来分组的 ...
分类：
其他好文 时间：
2019-05-11 23:12:24
阅读次数：
151
干货走起，闲话不多说，以下就是小编整理的大数据学习思路第一阶段：linux系统本阶段为大数据学习入门基础课程，帮大家进入大数据领取打好Linux基础，以便更好的学习Hadoop、habse、NoSQL、saprk、storm等众多技术要点。另：目前企业中无疑例外是使用Linux来搭建或部署项目的在这里还是要推荐下我自己建的大数据学习交流群:529867072，群里都是学大数据开发的，如果你正在学习
分类：
其他好文 时间：
2019-05-11 12:17:54
阅读次数：
168
安装插件 File->Setting->Pluugins 搜索 Translation 如何使用 安装完插件后，重启软件 快捷键 Ctrl+Shift+Y ，选中需要翻译的文本，然后鼠标右键选择Translate OVER！！！ ...
分类：
Web程序 时间：
2019-05-10 23:40:50
阅读次数：
1654
什么是storm的并发度 一个topology（拓扑）在storm集群上最总是以executor和task的形式运行在suppervisor管理的worker节点上。而worker进程都是运行在jvm虚拟机上面的，每个拓扑都会被拆开多个组件分布式的运行在worker节点上。 1.worker 2.e ...
分类：
其他好文 时间：
2019-05-10 21:56:15
阅读次数：
130
