消息中间件利用高效可靠的消息传递机制进行平台无关的数据交流，并基于数据通信来进行分布式系统的集成。通过提供消息传递和消息排队模型，它可以在分布式环境下扩展进程间的通信。对于消息中间件，常见角色大致也就有 Producer（生产者）、Consumer（消费者）。 常见的消息中间件产品: 1). Act ...
分类：
其他好文 时间：
2020-10-12 20:42:58
阅读次数：
31
NameNode运行时元数据需要存放在内存中，同时在磁盘中备份元数据的fsImage，当元数据有更新或者添加元数据时，修改内存中的元数据会把操作记录追加到edits日志文件中，这里不包括查询操作。如果NameNode节点发生故障，可以通过FsImage和Edits的合并，重新把元数据加载到内存中，此时SecondaryNameNode专门用于fsImage和edits的合并。
分类：
其他好文 时间：
2020-10-12 20:32:44
阅读次数：
26
没有web接口开发经验，只会简单写一写功能函数，有没有办法写一个收集客户端数据的接口呢？本文将一步步带你如何在没有接口开发经验的情况下轻松的使用AWS服务器服务构建自己定制化的API接口。一、前期准备1.1、业务需求假设T公司有一个全球性的网站，每个国家站点都有一个下载页面。公司想要去监测全球用户的下载情况，需要对下载按钮进行埋点，那我们就需要有一个接口可以监测到用户的下载情况，需要记录的数据有如
项目角色 此次项目是一个web项目，采用前后端分离开放。我负责的部分是前端，选择采用Reactjs进行构建。要实现前后端的分离开发，就需要将前后端的逻辑独立开来，所以前端部分需要负责页面构建、页面跳转逻辑、页面权限拦截，与后端的交互只有数据的请求。 为了方便实现页面的跳转，使用单页应用的结构，通过重 ...
分类：
Web程序 时间：
2020-10-09 21:37:05
阅读次数：
44
hadoop安装 1. 安装jdk a.复制jdk-xx.tar.gz 到~Downloads b.解压 c. 移动到/soft ； 创建软连接ln -s /soft/jdk-xxx jdk d.配置环境变量 [/etc/enviroment] JAVA_HOME=/soft/jdk PATH=". ...
分类：
其他好文 时间：
2020-10-09 21:22:17
阅读次数：
27
<repositories> <repository> <id>hadoop</id> <url>https://repository.cloudera.com/artifactory/cloudera-repos</url> </repository> <dependency> <groupId> ...
分类：
其他好文 时间：
2020-10-08 19:30:36
阅读次数：
21
什么是用户？组又是什么？为什么对我们系统来讲会有用户的概念？我们又说过现代的操作系统都是多任务多用户系统叫Multi-task,Multi-Users。所以在PC兼容机出现之前很多使用的都是主机。那个时候可以使用众多终端来链接到这个主机上来。这样一来就又很多人一起使用同一个计算机。在同一个系统上创建文件，管理文件使用文件。但是我么应该知道资源是有限的，我如果发现磁盘空间不够用了，偷偷的
分类：
系统相关 时间：
2020-10-08 18:37:55
阅读次数：
25
不看就亏系列！这里有完整的 Hadoop 集群搭建教程，和最易懂的 Hadoop 概念！| 附代码
分类：
其他好文 时间：
2020-10-08 18:37:04
阅读次数：
25
大数据是指无法在一定时间范围内用常规软件工具进行处理和分析的数据集合，需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能的海量、高增长率和多样性的信息资产
分类：
其他好文 时间：
2020-10-08 18:36:53
阅读次数：
17
