一、Hive的压缩和存储 1，MapReduce支持的压缩编码 压缩格式 工具 算法 文件扩展名 是否可切分 对应的编码/解码器 DEFLATE 无 DEFLATE .deflate 否 org.apache.hadoop.io.compress.DefaultCodec Gzip gzip DEF ...
分类：
其他好文 时间：
2020-06-07 19:08:04
阅读次数：
65
今天运行一个springboot教程项目 项目地址：https://gitee.com/yidao620/springboot-bucket.git 里面包括了许多子项目，目录结构如下图所示： 运行一个子项目时，Maven报错： 初步鉴定为，maven的包可能只是下载一次，不管你仓库的包到底有没有。 ...
分类：
其他好文 时间：
2020-06-06 11:02:19
阅读次数：
136
（一）统计信息分类 Oracle的统计信息可以分为如下6类： 统计信息分类 作用 表的统计信息 包含记录数、表块的数量、平均行长度等 索引的统计信息 包含索引的高度、叶子块的数量、聚簇因子等 列的统计信息 包含列的distinct值、列的null值的数量、列的最小值、列的最大值以及直方图等 系统统计 ...
分类：
数据库 时间：
2020-05-30 19:53:33
阅读次数：
65
我是否需要使用随机哈希作为 Amazon S3 存储桶中对象密钥名称的前缀？ https://amazonaws-china.com/cn/premiumsupport/knowledge-center/s3-object-prefix-naming/ 上次更新时间：2019 年 12 月 19 日 ...
分类：
其他好文 时间：
2020-05-27 20:36:09
阅读次数：
96
业务 使用oss更能，前端直接上传，可以显示上传进度 首先需要配置oss， 文档中给出了事例 登录OSS管理控制台。 单击Bucket列表，之后单击目标Bucket名称。 单击权限管理 > 跨域设置，在跨域设置区域单击设置。 单击创建规则，配置如下图所示。 解压事例之后，可以在demo体验，采用了P ...
分类：
其他好文 时间：
2020-05-25 15:40:32
阅读次数：
69
[toc] 一、对象存储OSS 为了解决海量数据存储与弹性扩容，项目中我们采用云存储的解决方案 阿里云OSS。 1、开通“对象存储OSS”服务 （1）申请阿里云账号 （2）实名认证 （3）开通“对象存储OSS”服务 （4）进入管理控制台 2、创建Bucket 选择：标准存储、公共读、不开通 3、使用 ...
分类：
其他好文 时间：
2020-05-22 21:12:15
阅读次数：
109
在主题中插入帖子的时候，如果你使用 S3 存储的时候，可能会发现无法上传! 如果下图的错误提示： 但是，如果你使用 S3 对你的图片进行备份的时候是没有问题。 问题所在 我们已经在后台的控制链表中对 Key 和 Id 进行了授权，应能够正常访问没有问题的。 后来发现一个问题是，我们没有将我们的 AW ...
分类：
Web程序 时间：
2020-05-22 12:42:46
阅读次数：
70
迁移虚拟机到AWS上有很多方式，比如很多第三方的备份软件都有类似的功能，把本地的虚拟机备份成AMI镜像文件，然后通过AMI来创建EC2实例。AWS本身也提供了2种常见的方式。第一个方式是AWS的命令行方式。简单的说有4个步骤：把虚拟机的磁盘文件，比如vhd，vmdk上传到S3的bucket里面通过AWSCLI的命令ec2import-image导入生成一个AMI镜像，生成AMI的这个过程可能会花很
分类：
其他好文 时间：
2020-05-21 19:17:36
阅读次数：
155
概念 桶排序 Bucket Sort 假设待排序的输入数据服从均匀、独立地分布在区间 [ 0, 1 ）. 桶排序将区间 [ 0, 1）划分为 n 个相同大小的子区间, 或称为 桶 bucket. 然后, 将输入的 n 个数据分别放到各个桶中. 进而, 先对每个桶中的数进行排序, 然后遍历每个桶, 按 ...
分类：
编程语言 时间：
2020-05-18 16:16:44
阅读次数：
55
概念 桶排序 Bucket Sort 假设待排序的输入数据服从均匀、独立地分布在区间 [ 0, 1 ）. 桶排序将区间 [ 0, 1）划分为 n 个相同大小的子区间, 或称为 桶 bucket. 然后, 将输入的 n 个数据分别放到各个桶中. 进而, 先对每个桶中的数进行排序, 然后遍历每个桶, 按 ...
分类：
编程语言 时间：
2020-05-18 16:13:50
阅读次数：
60
