由于在生产环境中大量使用hive，而hive的权限又较弱，如果可以记录所有hive操作，在增强安全性的同时，还能够统计hive表的使用频率；同时如果能够记录hql的开始和结束时间，则能够找出系统中花费时间较多的job，针对性的进行优化，因此跟踪hive的使用轨迹，增强安全的同时也能方便问题定位。如何记录用户操作了？Hive Hook为我们提供的方便的开放接口。
我们对hive的使用主要有两种使用...
分类：
其他好文 时间：
2014-07-09 10:21:05
阅读次数：
233
不足
即使开启hive权限认证的情况下，任何用户仍然是超级用户，可以通过grant给任何人赋予任何权限，这样权限认证基本没有意义，因此必须在开启权限认证的同时，对执行grant/revoke的实体进行限制，比如只有admin才能 grant privilege on database，只有table owner才能grant privilege on table。BIP中hive目前是没有开...
分类：
其他好文 时间：
2014-07-08 19:07:16
阅读次数：
226
客户遇到个DG的问题，存储使用的ASM管理，有多个磁盘盘。
在主库创建数据文件，备库自动创建的数据文件都在同一磁盘组，并且在主库创建数据文件是指定的是类似**.DBF的名字，到备库也变成了使用ASM的数字格式**.266.123456
这是因为使用了OMF特性。
OMF,全称是Oracle_Managed Files,即Oracle文件管理。
使用OMF可以简化管理员的管理工作，不用指定文...
分类：
其他好文 时间：
2014-07-08 14:56:21
阅读次数：
271
一、开启权限
目前hive支持简单的权限管理，默认情况下是不开启，这样所有的用户都具有相同的权限，同时也是超级管理员，也就对hive中的所有表都有查看和改动的权利，这样是不符合一般数据仓库的安全原则的。Hive可以是基于元数据的权限管理，也可以基于文件存储级别的权限管理，此次以介绍MetaData权限管理为主。通过以下配置开启Hive身份认证功能进行权限检查：
hive.se...
分类：
其他好文 时间：
2014-07-08 14:06:26
阅读次数：
192
说在，开篇之前很早就有说说Metadata（元数据）和IL（中间语言）的想法了，一直在这篇开始才算脚踏实地的对这两个阶级兄弟投去些细关怀，虽然来得没有《第一回：恩怨情仇：is和as》那么迅速，但是Metadata和IL却是绝对重量级的内容，值得我们在任何时间关注，本文就是开始。1 引言你可曾想到，我...
分类：
其他好文 时间：
2014-07-07 08:17:04
阅读次数：
214
书接上回[第二十四回：认识元数据和IL（上）]，我们对PE文件、程序集、托管模块，这些概念与元数据、IL的关系进行了必要的铺垫，同时顺便熟悉了以ILDASM工具进行反编译的基本方法认知，下面是时候来了解什么是元数据，什么是IL这个话题了，我们继续。很早就有说说Metadata（元数据）和IL（中间语...
分类：
其他好文 时间：
2014-07-07 00:58:21
阅读次数：
350
装箱与拆箱是.NET中非常重要的概念。
装箱是将值类型转换成引用类型，或者是实现了接口的值类型。装箱将数据存储的空间由Thread stack转存到了Managed Heap中。凡是在Managed Heap中开辟空间，都将触发GC（垃圾回收），在Thread statck将不会触发垃圾回收。
拆箱就是将数据从Managed Heap中提取出来，并拷贝到Thread stack中。所以拆箱会形...
分类：
Web程序 时间：
2014-07-06 09:33:05
阅读次数：
272
今天，有个同事问我，怎样在C#中使用全局钩子？以前写的全局钩子都是用unmanaged C或C++写个DLL来实现，可大家都知道，C#是基于.Net Framework的，是managed，怎么实现全局钩子呢？于是开始到网上搜索，好不容易找到一篇，318804 - HOW TO: Set a Win...
分类：
其他好文 时间：
2014-07-03 10:23:28
阅读次数：
302
一、SecondaryNameNode用途 SNN是用来保存namenode中对HDFS metadata的信息的备份，并减少namenode重启的时间，SNN进程默认运行在 namenode 机器上，如果这台机器出错，宕机，对恢复HDFS文件系统是很大的灾难，因此最佳方式是将SNN进程配置在另外....
分类：
其他好文 时间：
2014-07-01 21:53:52
阅读次数：
334
1、什么是MEFMEF是一个来自于微软协作构建扩展应用的新框架，它的目的是在运行中的应用中添加插件。MEF继承于.NET 4.0 Framework平台，存在于各种应用平台的系统程序集中2、程序集System.ComponentModel.Composition.dll3、关键结构ImportExp...
分类：
其他好文 时间：
2014-07-01 10:38:32
阅读次数：
213
