swagger接口文档查看，请求地址：http://localhost:31001/swagger-ui.html 深入剖析Java编程中的中文问题及建议最优解决方法 cd /usr/local/nginx/sbin/ ./nginx 阿里云maven中央仓库配置 MongoDB、HBase、Red ...
分类：
其他好文 时间：
2020-01-28 23:16:33
阅读次数：
95
最近在研究redis 遇到redis requires Ruby version >= 2.2.2问题 解决办法是 先安装rvm，再把ruby版本提升至2.3.3 1.安装curl sudo yum install curl 2. 安装RVM curl -L get.rvm.io | bash -s ...
分类：
其他好文 时间：
2020-01-28 14:17:30
阅读次数：
85
KV键值对存储大家都很熟悉了，Java 中的 map 都是在堆内存储，如果我们遇到一种情况是map特别大，每次GC我们不想释放这些空间，那么这一部分缓存数据又该如何处理呢？当然大家说可以使用第三方缓存组件：Redis，HBase，MongoDB，今天给大家多一种选择：堆外内存。 今天要给大家介绍的是 ...
分类：
编程语言 时间：
2020-01-27 15:53:23
阅读次数：
104
版本 HDP：3.0.1.0 HBase：2.0.0 一、前言 之前的文章也提到过，最近工作中需要对HBase进行二次开发（参照HBase的AES加密方法，为HBase增加SMS4数据加密类型）。研究了两天，终于将开发流程想清楚并搭建好了debug环境，所以就迫不及待地想写篇文章分享给大家。 <! ...
分类：
其他好文 时间：
2020-01-26 17:45:45
阅读次数：
85
os 就是operation system os.name Python 运行所在的环境: posix,nt,java os.environ os.walk() os.listdir() “list directories”，列出（当前）目录下的全部路径（及文件） os.mkdir() “make ...
分类：
编程语言 时间：
2020-01-25 23:29:18
阅读次数：
84
Hbase:基于hdfs的数据库,来源于google的一篇论文bigtable.基于HDFS实现高可用、分布式、列式存储、核心包括：-Rowkey: 可以简单理解成mysql中的主键-列簇，列-时间戳按照Rowkey字典顺序存储，基于rowkey的高效检索，同时继承hdfs的高吞吐能力。Hbase用 ...
分类：
其他好文 时间：
2020-01-25 15:31:49
阅读次数：
94
最近有一个将 mysql 数据导入到 MongoDB 中的需求，打算使用 Kettle 工具实现。本文章记录了数据导入从0到1的过程，最终实现了每秒钟快速导入约 1200 条数据。一起来看吧~ 一、Kettle 连接图 简单说下该转换流程，增量导入数据： <! more 1）根据 source 和 ...
分类：
数据库 时间：
2020-01-24 23:40:06
阅读次数：
116
大数据环境需要的安装包合集，包括： apache flume 1.7.0 bin.tar.gz apache hive 1.2.1 bin.tar.gz hadoop 2.7.2.tar.gz hbase 1.3.1 bin.tar.gz jdk 8u144 linux x64.tar kafka_ ...
分类：
其他好文 时间：
2020-01-24 17:25:13
阅读次数：
88
1、pom.xml 版本号 <properties> <hbase.version>2.2.2</hbase.version> <hadoop.version>2.10.0</hadoop.version> <spark.version>2.4.2</spark.version> </propert ...
分类：
其他好文 时间：
2020-01-22 12:57:25
阅读次数：
62
1.数据导入与导出 # 数据导入 pd.read_csv(filename) # 导入csv格式文件中的数据 pd.read_table(filename) # 导入有分隔符的文本 (如TSV) 中的数据 pd.read_excel(filename) # 导入Excel格式文件中的数据 pd.re ...
分类：
其他好文 时间：
2020-01-19 23:53:40
阅读次数：
85
