hive分组排序函数 分组取top10 语法：row_number() over( partition by 字段a order by 计算项b desc) rank --这里rank是别名 Partition by：类似hive的建表，分区的意思 这里按字段a分区，对计算项b进行降序排序 实例： ...
分类：
编程语言 时间：
2017-08-18 11:13:25
阅读次数：
393
处理高并发问题的一些方式1.拆表：大表拆小表（垂直拆，水平拆；分表，分区partition，分片sharding），可以在应用层实现，也可以在数据库层面实现一部分；提高系统性能。2.分库：把表放到不同的数据库，这也是分布式数据库的基础；提高系统性能。3.分布式：不同的数据库放到不同的服务器；提高系统 ...
分类：
其他好文 时间：
2017-08-15 17:17:24
阅读次数：
366
Oracle Schema Objects 表分区 表- - 分区（ partition ）TABLE PARTITION 一段时间给出一个分区，这样方便数据的管理。 可以按照范围range分区，列表分区，哈希分区等。 创建表分区： SQL> create table t_part(id int) ...
分类：
数据库 时间：
2017-08-10 13:43:54
阅读次数：
229
RDSforMySQL通过分区归档历史数据原始表分区用于分区维护的存储过程每月调用存储过程的事件随着数据的积累，数据量的增加，越来越多的表体积变的庞大，不但影响查询的执行时间，而且使得管理工作（比如添加删除索引）变的越发复杂和困难。本文介绍一个通过分区滑动来归档历史数..
分类：
数据库 时间：
2017-07-31 14:46:16
阅读次数：
239
之前主要研究oracle与mysql，认为hive事实上就是一种数据仓库的框架，也没有太多另类，所以主要精力都在研究hadoop。hbase，sqoop，mahout，近期略微用心看了下hive。事实上hive还是比我想象中好用的多，心里有点点暗爽，不论是与hadoop的衔接，还是在对外查询分析，定 ...
分类：
其他好文 时间：
2017-07-22 23:39:54
阅读次数：
225
[三思笔记]全面学习Oracle分区表及分区索引 2008-04-15 关于分区表和分区索引(About PartitionedTables and Indexes) 对于 10gR2 而言，基本上可以分成几类： v Range(范围)分区 v Hash(哈希)分区 v List(列表)分区 v 以 ...
分类：
数据库 时间：
2017-07-22 13:12:51
阅读次数：
261
为什么要分表和分区？ 日常开发中我们经常会遇到大表的情况，所谓的大表是指存储了百万级乃至千万级条记录的表。这样的表过于庞大，导致数据库在查询和插入的时候耗时太长，性能低下，如果涉及联合查询的情况，性能会更加糟糕。分表和表分区的目的就是减少数据库的负担，提高数据库的效率，通常点来讲就是提高表的增删改查 ...
分类：
数据库 时间：
2017-07-17 21:50:08
阅读次数：
194
要了解分区与分片之间的差异，首先我们需要知道什么是分片与分区。分片：分片Sharding不是一门新技术，而是一个相对简朴的软件理念。众所周知，MySQL5之后才有了数据表分区功能，那么在此之前，很多mysql的潜在用户都对MySQL的扩展性有所顾虑，而是否具备分区功能就成了衡量一..
分类：
数据库 时间：
2017-07-09 10:50:22
阅读次数：
3724
面对当今大数据存储，设想当mysql中一个表的总记录超过1000W，会出现性能的大幅度下降吗？ 答案是肯定的，一个表的总记录超过1000W，在操作系统层面检索也是效率非常低的 解决方案： 目前针对海量数据的优化有两种方法： 1、大表拆小表的方式（主要有分表和分区两者技术） （1）分表技术 垂直分割 ...
分类：
数据库 时间：
2017-07-02 22:16:03
阅读次数：
346
