Google的三篇论文，Google File System，MapReduce以及Big Table可以说是整个大数据领域的三驾马车，这里，我们简单介绍下这三驾马车基本都是干哈的，重点解读下Bigtable: A Distributed Storage System for Structured ...
分类：
其他好文 时间：
2020-07-05 17:38:34
阅读次数：
68
DDoS即分布式拒绝服务攻击，DDoS里面的 DoS是denial of service(停止服务)的缩写，表示这种攻击的目的，就是使得服务中断。最前面的那个D是 distributed(分布式)，表示攻击不是来自一个地方，而是来自四面八方，因此更难防御。 什么是DDoS攻击？ 这是我见过最有趣、最 ...
分类：
其他好文 时间：
2020-07-04 22:38:44
阅读次数：
95
Hadoop的核心由3个部分组成： HDFS: Hadoop Distributed File System，分布式文件系统，hdfs还可以再细分为NameNode、SecondaryNameNode、DataNode。 YARN: Yet Another Resource Negotiator，资 ...
分类：
其他好文 时间：
2020-06-27 18:39:42
阅读次数：
68
Hadoop是一个能够对海量数据进行分布式处理的系统架构，主要包含3大块：分布式存储系统HDFS(Hadoop Distributed File System)分布式存储层、分布式计算框架MapReduce分布式计算层、资源管理系统YARN(Yet Another Resource Negotiat... ...
分类：
其他好文 时间：
2020-06-27 11:40:19
阅读次数：
93
一、RDD简介 RDD 全称为 Resilient Distributed Datasets，是 Spark 最基本的数据抽象，它是只读的、分区记录的集合，支持并行操作，可以由外部数据集或其他 RDD 转换而来，它具有以下特性： 一个 RDD 由一个或者多个分区（Partitions）组成。对于 R ...
分类：
其他好文 时间：
2020-06-25 21:27:05
阅读次数：
66
MSDTC(分布式交易bai协调器)，协调跨多个数据库、消du息队列、文件系统等zhi资源管理器的事务。该服务的dao进程名为Msdtc.exe。 解决办法: 1. 在windows控制面版-->管理工具-->服务-->Distributed Transaction Coordinator-->属性 ...
分类：
数据库 时间：
2020-06-20 22:25:25
阅读次数：
81
A core element in Flink’s distributed snapshotting are the stream barriers. These barriers are injected into the data stream and flow with the records ...
分类：
其他好文 时间：
2020-06-20 13:41:21
阅读次数：
70
以前觉得分布式事务要和数据库事务一样，一个失败就要回退（2pc），直到看了 https://www.cnblogs.com/savorboard/p/distributed-system-transaction-consistency.html 才发现那样并不好。比如你下单买了一件衣服，但是这件衣服 ...
分类：
Web程序 时间：
2020-06-18 16:20:22
阅读次数：
58
1、HDFS（Hadoop Distributed File System）是一个分布式文件系统，具有良好的扩展性、容错性以及易用的API。它的核心思想是将文件切分成等大的数据块，以多副本的形式存储到多个节点上。HDFS采用了经典的主从软件架构，其中主服务被称为NameNode，管理文件系统的元信息 ...
分类：
其他好文 时间：
2020-06-18 14:33:17
阅读次数：
67
- 起源 - TCC概念由Pat Helland于2007年发表的一篇名为《Life beyond Distributed Transactions:an Apostate’s Opinion》的论文提出, 在该论文中，TCC还是以Tentative-Confirmation-Cancellatio ...
分类：
其他好文 时间：
2020-06-16 18:08:36
阅读次数：
45
