1.1 分布式文件系统 1.1.1 什么是分布式文件系统 相对于本机端的文件系统而言，分布式文件系统（英语：Distributed file system, DFS），或是网络文件系统（英语：Network File System），是一种允许文件通过网络在多台主机上分享的文件系统，可让多机器上的多 ...
分类：
其他好文 时间：
2018-08-25 20:03:24
阅读次数：
269
CC1310开发过程中，可能遇到的主要问题和解决方法总结如下： 一、主要开发工具 1、CCS：最好安装最新的高版本；或者安装IAR也可以。 2、SmartRF Studio 7：PC端测试工具（可测试接收、发送、底噪测试、载波射频测试等）、射频参数设置（可以导出射频参数到代码中）。 3、Flash ...
分类：
其他好文 时间：
2018-08-23 17:42:24
阅读次数：
2181
随着互联网、云计算及大数据等信息技术的发展，越来越多的应用依赖于对海量数据的存储和处理，如智能监控、电子商务、地理信息等，这些应用都需要对海量图片的存储和检索。由于图片大多是小文件(80%大小在数MB以内)，以GFS、HDFS为代表的适用于流式访问大文件的分布式存储系统，若直接用来存储图片，由于元数 ...
分类：
其他好文 时间：
2018-08-17 19:08:00
阅读次数：
239
1.使用fdisk -l命令,查看可分区的磁盘 2.使用parted命令进行分区 3.创建分区表 磁盘类型选择 gpt , 警告选择yes,代表清除磁盘原有信息 4.使用print命令查看当前分区情况 5.使用mkpart命令,创建分区 分区名称随意 文件系统按要求 起始结束按要求,然后Ignore ...
分类：
系统相关 时间：
2018-08-12 15:34:43
阅读次数：
256
Google大数据技术：MapReduce、BigTable、GFS Hadoop：一个模仿Google大数据技术的开源实现 ? HDFS的概念 数据块 磁盘中的关系： ? HDFS同样也有块（block）的概念，但是大很多，默认为64MB。与单一磁盘上的文件系统相似，HDFS上的文件也被划分为块大 ...
分类：
其他好文 时间：
2018-08-08 21:23:09
阅读次数：
151
1. HBase是HDFS上面向列的分布式数据库 HBase首先是数据库，分布式的，面向列的，<首选在hdfs基础上> Google发布三篇论文：GFS，MapReduce，BigTable开启分布式存储和计算的纪元 hdfs+mapreduce(Hadoop)解决离线分析；Hbase解决实时处理业 ...
分类：
其他好文 时间：
2018-08-04 11:32:08
阅读次数：
159
安装 vmtools 的步骤说明 1.进入 centos2.点击 vm 菜单的->install vmware tools3.centos 会出现一个 vm 的安装包4.点击右键解压, 得到一个安装文件5.进入该 vm 解压的目录 ，该文件在 /root/桌面/vmware-tools-distri ...
分类：
其他好文 时间：
2018-07-26 16:16:41
阅读次数：
162
#cat jia.yml - hosts: test-gfs user: dev gather_facts: true vars: PORT: "3306" MESAGE: "wangrenqing" IP_local: "{{ansible_default_ipv4.address}}" IP_l ...
分类：
其他好文 时间：
2018-07-04 17:35:52
阅读次数：
198
基于谷歌的论文 GFS hdfs MAP-Reduce 做的实现 Hadoop 解决的问题 如何存储 及分析 Bigtable Hbase(列式数据库) PB级别 具体应用 网盘 基于 hdfs 一、HDFS优点 高容错性 1.数据自动保存多个副本 （随机存放）2.副本丢失后，自动恢复 适合批处理 ...
分类：
其他好文 时间：
2018-07-03 23:52:34
阅读次数：
186
一、GFS Google File System就是HDFS的前身 HDFS 参照了GFS的设计理念，大部分架构设计概念是类似的，比如 HDFS NameNode 相当于 GFS Master，HDFS DataNode 相当于 GFS chunkserver\ 1.设计目标： 多个客户端可以在不需 ...
分类：
其他好文 时间：
2018-06-20 19:01:09
阅读次数：
382
