Navicat Premium 12 安装 安装手册(蓝奏云):https://www.lanzous.com/i95mjfa 安装包(蓝奏云):https://www.lanzous.com/i95mfsj Navicat Premium 12 激活 注册机(蓝奏云):https://www.la ...
分类:
其他好文 时间:
2020-02-08 14:04:30
阅读次数:
68
2020.2.2今天的寒假生活学习了了解Spark 内存计算框架.Hadoop使用数据复制来实现容错性,而Spark使用RDD数据存储模型来实现数据的容错性。 了解了 hadoop框架 中的 HDFS(分布式文件系统) Mapreduce(分布式计算框架) map函数 Reduce (函数) YAR ...
分类:
其他好文 时间:
2020-02-02 21:55:13
阅读次数:
73
FastDFS 研究 什么是分布式文件系统 什么是文件系统 文件系统是负责管理和存储文件的系统软件,它是操作系统和硬件驱动之间的桥梁,操作系统通过文件系统提供的接口去存取文件,用户通过操作系统访问磁盘上的文件。如下图: 什么是分布式文件系统 为什么会有分布文件系统呢?分布式文件系统是面对互联网的需求 ...
分类:
其他好文 时间:
2020-02-02 15:42:01
阅读次数:
308
一、Hbase 简介 hdfs 是分布式文件系统, 只支持在文件层面的增、删除、改(需要把文件下载下来,改完,再上传上去)、查 hbase 是支持海量数据存储的NoSql数据库,基于hdfs的,支持数据的增、删、改、查,支持随机写数据(改指定的某一条数据) hbase 查询数据只能根据rowkey进 ...
分类:
其他好文 时间:
2020-01-30 19:24:15
阅读次数:
78
【dump整个库】 1.在shell中使用mysqldump命令dump数据库homework_gnmis ,并保存在homework_gnmis.sql中: mysqldump -uroot -p --single-transaction --databases homework_gnmis > ...
分类:
数据库 时间:
2020-01-29 21:55:54
阅读次数:
101
一、FastDFS介绍 简介 FastDFS是一个开源的高性能分布式文件系统(DFS)。它的主要功能包括:文件存储,文件同步和文件访问,以及高容量和负载平衡。主要解决了海量数据存储问题,特别适合以中小文件(建议范围:4KB < file_size <500MB)为载体的在线服务。 FastDFS系统 ...
分类:
其他好文 时间:
2020-01-28 20:45:05
阅读次数:
101
官网介绍 什么是Spark 官网地址:http://spark.apache.org/ Apache Spark? 是用于大规模数据处理的统一分析引擎。 从右侧最后一条新闻看,Spark也用于AI人工智能。 spark是一个实现快速通用的集群计算平台。它是由加州大学伯克利分校AMP实验室 开发的通用 ...
分类:
其他好文 时间:
2020-01-26 19:08:26
阅读次数:
75
上到研究生,搞的是分布式文件系统和缓存系统研究方向,学习的过程中发现数学基础几乎忘光了,越来越发现数学的重要性;亡羊补牢,及时进行补充,重新回忆起来,也希望能有新的收获!本文中,主要是记录我在复习高等数学一些积累和概念索引,主要是对个人有用,如果对您有帮助的话,希望能点击推荐! 1. 函数与极限 邻 ...
分类:
其他好文 时间:
2020-01-17 20:46:19
阅读次数:
75
FastDFS 是用 c 语言编写的一款开源的分布式文件系统。FastDFS 为互联网量身定制, 充分考虑了冗余备份、负载均衡、线性扩容等机制,并注重高可用、高性能等指标,使用 FastDFS 很容易搭建一套高性能的文件服务器集群提供文件上传、下载等服务。 FastDFS 架构包括 Tracker ...
分类:
其他好文 时间:
2020-01-17 13:22:22
阅读次数:
86
HDFS产出背景及定义 Hadoop分布式文件系统(HDFS)被设计成适合运行在通用硬件(commodity hardware)上的分布式文件系统。它和现有的分布式文件系统有很多共同点。但同时,它和其他的分布式文件系统的区别也是很明显的。HDFS是一个高度容错性的系统,适合部署在廉价的机器上。HDF ...
分类:
其他好文 时间:
2020-01-15 21:18:15
阅读次数:
85