Hive的数据模型 Hive数据模型.png 数据模型组成及应用场景 Hive的数据模型主要有：database、table、partition、bucket四部分； 数据模型之database database：相当于关系型数据库中的命名空间，作用是将数据库应用隔离到不同的数据库模式中，hive提 ...
分类：
其他好文 时间：
2019-12-14 15:25:44
阅读次数：
104
# 初始化amap表, 把列表num_buckets添加到amap中,num_buckets用来存hashmap里设置的内容def new(num_buckets=256): amap = [] for i in range(num_buckets): amap.append([]) return ...
分类：
其他好文 时间：
2019-12-11 09:27:30
阅读次数：
91
unordered-multiset是不定序关联式容器，其底部是通过哈希表实现功能。 （ps:黑色框就是bucket，白色框即为bucket上挂载的元素） 为了提高查找效率，bucket（篮子）的数量应当大于元素的个数，这是因为在bucket上悬挂的元素是通过单链表串起来的，而且一个unordere ...
分类：
其他好文 时间：
2019-12-10 12:54:58
阅读次数：
82
Page 1COMP3015 Data Communications and NetworkingProject 2019-20IntroductionKidPaint is a paint app for kids. A kid can use a pen or bucket with diffe ...
分类：
Web程序 时间：
2019-12-03 19:41:23
阅读次数：
113
概要 HashTable也是散列表的一种实现，我们在上一篇解析了HashMap,在这里我们与HashMap做个对比，让你能清晰的了解两者的区别: 散列表实现方式数据安全数据安全实现方式key\value是否可为Null HashMap 数组+单向链表+红黑树 不安全 无 可为Null HashTab ...
分类：
其他好文 时间：
2019-12-01 14:05:17
阅读次数：
89
最近经常需要创建一些S3Bucket用于备份。每个新建的Bucket都应该配置lifecycle，自动删除旧的数据，以便节约空间和开支。豆子写了一个简单的Lambda函数来自动实现。每次当我们创建一个Bucket的时候，他会调用对应的API，Cloudtrail监测到这个事件后，会发送给Cloudwatch,然后Cloudwatch会自动调用我的函数来创建lifecyclepolicy。下面是简单
分类：
编程语言 时间：
2019-11-29 18:34:01
阅读次数：
110
其他命令¶ 目标¶ 查找文件 find 软链接 in 打包和压缩 tar 软件安装 apt-get 01.查找文件¶ find命令功能非常强大，通常在特定的目录下搜索符合条件的文件 序号命令作用 01 find [路径] -name'*.py' 查找指定路径下拓展名是.py的文件，包括子目录 如果省 ...
分类：
其他好文 时间：
2019-11-27 12:39:50
阅读次数：
81
将数据存储在Amazon S3中可带来很多好处，包括规模、可靠性、成本效率等方面。最重要的是，你可以利用Amazon EMR中的Apache Spark，Hive和Presto之类的开源工具来处理和分析数据。 尽管这些工具功能强大，但是在处理需要进行增量数据处理以及记录级别插入，更新和删除场景时，仍 ...
分类：
Web程序 时间：
2019-11-25 13:35:57
阅读次数：
166
1.实现结构是hash表bucket，底层就是node，也有人称为段(segment) 2.put，通过对key执行hashcode()找到对应对索引，当hashcode相同是发生“碰撞”，采用链表方式存储，jdk8在量大时引入红黑树数据结构 3.get，通过对key执行hashcode()找到对应 ...
分类：
其他好文 时间：
2019-11-19 01:13:45
阅读次数：
67
github.com/yongxinz/te… Elasticsearch 基本概念 Index：Elasticsearch用来存储数据的逻辑区域，它类似于关系型数据库中的database 概念。一个index可以在一个或者多个shard上面，同时一个shard也可能会有多个replicas。 Do ...
分类：
编程语言 时间：
2019-11-17 12:48:17
阅读次数：
105
