思路: 先在主机s1上安装配置,然后远程复制到其它两台主机s2、s3上, 并分别修改配置文件server.properties中的broker.id属性。 1、 搭建前准备 示例共三台主机,主机IP映射信息如下: 搭建ZooKeeper 集群,搭建步骤参考: https://www.cnblogs. ...
分类:
其他好文 时间:
2019-05-11 21:13:14
阅读次数:
151
使用s3git 我们可以方便的基于git协议进行s3存储数据的版本管理,同时也提供了一个方便的golang 包, 我们可以集成到我们的应用中,但是有一点,目前已经没有再更新过了,但是设计理论很不错,实际上现在的 ipfs 与这种就是类似的做法,ipfs 更灵活强大。 参考资料 https://git ...
分类:
其他好文 时间:
2019-05-11 09:45:17
阅读次数:
164
使用CloudberryExplorer是,如果没有加入此权限,用户是无法在打开软件的时候自动让其列出所有S3bucket的,因此在IAM中需要给用户加上这个S3的Permissionpolicy如下:{"Statement":[{"Effect":"Allow","Action":"s3:",&q
分类:
其他好文 时间:
2019-05-10 11:22:26
阅读次数:
161
同事要我帮忙把一些数据从一个AWS下的S3转移到另一个账户下的S3,实现的方式很多,例如AWSCLI,但是我还是喜欢可视化,于是想到用CloudberryDrive和CloudberryBackup来迁移,这两个软件都有15天的试用期,我在这期间内就能把数据传完。设想就是把我的S3挂载成一个本地盘,然后通过Backup把这个本地盘上的数据传到同事的S3上。于是在建立好IAM账户和权限设定后,我就安
分类:
数据库 时间:
2019-05-08 16:06:40
阅读次数:
244
https://github production release asset 2e65be.s3.amazonaws.com/45055693/eb5a6080 6b82 11e9 853c 9e905b7b38c2?X Amz Algorithm=AWS4 HMAC SHA256&X Amz C ...
分类:
其他好文 时间:
2019-05-07 15:42:31
阅读次数:
112
public class Solution { /** * @param s1: A string * @param s2: A string * @param s3: A string * @return: Determine whether s3 is formed by interleavin... ...
分类:
其他好文 时间:
2019-05-06 01:06:40
阅读次数:
162
1Hive简介 Hive对我来说就是一个基于HDFS的数据仓库,它提供了一个种类SQL语言(和SQL标准基本一样又有一些特殊的地方不一样),能让不精通Java语言而熟悉SQL语言的工程师,快速的对HDFS或其他存储文件系统如Amazon,S3,上的数据进行数据分析,是Hadoop生态系统中非常重要的 ...
分类:
其他好文 时间:
2019-05-03 11:37:53
阅读次数:
170
1、准备 Hadoop 版本:2.7.7 ZooKeeper 版本:3.4.14 Hbase 版本:2.0.5 四台主机: s0, s1, s2, s3 搭建目标如下: HMaster:s0,s1(备份HMaster) HRegionServer:s1, s2, s3 主机映射信息如下 Hadoop ...
分类:
其他好文 时间:
2019-05-02 21:28:26
阅读次数:
130
https://www.clustrix.com/bettersql/spanner-vs-aurora/ Google Spanner versus Amazon Aurora In July 2015, Amazon delivered Aurora, the AWS-only Enterpri ...
分类:
其他好文 时间:
2019-04-30 14:02:13
阅读次数:
112
[TOC] 论文地址:http://ai2 website.s3.amazonaws.com/publications/XNOR Net.pdf Abstract 我们提出了两种标准卷积神经网络有效近似方法:二值化权值网络和XNOR网络。在二值化权值网络中,卷积核使用二值化进 ...
分类:
Web程序 时间:
2019-04-30 12:14:16
阅读次数:
180