HDFS的探究： HDFS HDFS是 Hadoop Distribute File System的缩写，是谷歌GFS分布式文件系统的开源实现，Apache Hadoop的一个子项目，HDFS基于流数据访问模式的分布式文件系统，支持海量数据的存储，允许用户将百千台组成存储集群，HDFS运行在低成本的 ...
分类：
其他好文 时间：
2019-02-22 12:25:54
阅读次数：
258
存储一般分为光纤存储（FC-SAN）跟IP存储（IP-san） FC-SAN构成有服务器HBA卡，光纤交换机，存储设备 1，服务器通过HBA卡连接到光纤交换机端口，存储设备连接到光纤交换机端口 2，在光纤交换机上面分别设置HBA卡别名（以WWN号标识）存储设备别名（以WWN号识别），然后创建zone ...
分类：
其他好文 时间：
2019-02-20 10:03:19
阅读次数：
138
配置greenplum客户端认证 配置pg_hba.conf 使用Psycopg2访问数据库 Psycopg2 是 Python 语言下最常用的连接PostgreSQL数据库连接库，Psycopg2 的底层是由 C 语言封装 PostgreSQL 的标准库 libpq 实现的， 运行速度非常快，Ps ...
分类：
数据库 时间：
2019-02-15 17:59:27
阅读次数：
413
SpringBoot原则是约定优于配置,简化spring应用开发，去繁从简，产品级别的应用。 SpringBoot有哪些优点1、快速创建独立运行的spring项目与主流框架集成 2、使用嵌入式的servlet容器，应用无需打包成war包 3、starters自动依赖与版本控制 4、大量的自动配置，简 ...
分类：
编程语言 时间：
2019-02-14 17:47:23
阅读次数：
183
牛叉的工具有好几个，包括MyFlash、binlog2Sql、mysqlbinlog_flashback，还有一些收费的等等，各有优劣，具体使用可自行百度 1、安装binlog2sql git安装方法：https://www.cnblogs.com/cjh-notes/p/10354532.html ...
分类：
数据库 时间：
2019-02-07 23:22:08
阅读次数：
222
从Java开发通过大概3个月的学习转到大数据开发，主要分享一下学习路径： 第一阶段: 01.Linux学习（跟鸟哥学就ok了） 02.Java 高级学习（《深入理解Java虚拟机》、《Java高并发实战》） 第二阶段: 03.Hadoop （董西成的书） 04.HBase（《HBase权威指南》） ...
分类：
编程语言 时间：
2019-01-29 12:49:15
阅读次数：
296
reference: http://dblab.xmu.edu.cn/blog/install-hbase/ we need to set hdfs dfs.replication=3 start hbase normal, we can find it in hdfs web page. ...
分类：
其他好文 时间：
2019-01-28 00:46:22
阅读次数：
212
[toc] 1 HDFS概述 在大数据时代，大数据处理需要解决的首要问题是：如何高效地存储所产生的规模庞大的数据？由于传统集中式的物理服务器在存储容量和数据传输速度等方面都有限制，故而越来越不符合这些数据的实际存储需要。 所以为了实现对大数据的存储，就需要利用成百上千台甚至更多的分布式服务器节点（由 ...
分类：
其他好文 时间：
2019-01-25 21:03:56
阅读次数：
286
1.在以前使用其他数据库时，经常会使用id自增来做主键，但是hbase数据库中不知道怎么来设置自增主键，所以我打算不要id自增主键。然后删除原来的表，重新创建表。 删除表语句： ...
分类：
数据库 时间：
2019-01-20 12:07:23
阅读次数：
237
