项目结构源码：ImageInfo.zip第一步：添加需要的架包metadate-extractor.jar 架包下载地址：https://code.google.com/p/metadata-extractor/downloads/list 或者去Maven仓库下载 http://search......
分类：
编程语言 时间：
2014-07-11 18:15:44
阅读次数：
685
2014年国内云计算产业进入飞速发展的阶段，多年来的云计算热度使得云计算产业迅速进入了应用落地的阶段。IaaS、PaaS、SaaS市场的各大厂商纷纷大力布局，使得云计算在这三个层次的应用进入实际使用阶段。IaaS厂商已经基本成熟，拥有成熟的管理技术和虚拟化平台，并已经提供商业化应用一段时间。各大云计算厂商在IaaS已经进入成熟应用的阶段，纷纷把注意力投向了PaaS领域。各自PaaS平台的构件成为了...
分类：
其他好文 时间：
2014-07-11 00:38:09
阅读次数：
351
随着一些SaaS软件逐渐被越来越多的租户使用，租户的个性化定制需求逐渐成为一个SaaS软件实用性和适用性的一个困难。如何应对？元数据驱动是解决这一难题的有效技术手段。...
分类：
其他好文 时间：
2014-07-09 11:41:41
阅读次数：
243
由于在生产环境中大量使用hive，而hive的权限又较弱，如果可以记录所有hive操作，在增强安全性的同时，还能够统计hive表的使用频率；同时如果能够记录hql的开始和结束时间，则能够找出系统中花费时间较多的job，针对性的进行优化，因此跟踪hive的使用轨迹，增强安全的同时也能方便问题定位。如何记录用户操作了？Hive Hook为我们提供的方便的开放接口。
我们对hive的使用主要有两种使用...
分类：
其他好文 时间：
2014-07-09 10:21:05
阅读次数：
233
不足
即使开启hive权限认证的情况下，任何用户仍然是超级用户，可以通过grant给任何人赋予任何权限，这样权限认证基本没有意义，因此必须在开启权限认证的同时，对执行grant/revoke的实体进行限制，比如只有admin才能 grant privilege on database，只有table owner才能grant privilege on table。BIP中hive目前是没有开...
分类：
其他好文 时间：
2014-07-08 19:07:16
阅读次数：
226
一、开启权限
目前hive支持简单的权限管理，默认情况下是不开启，这样所有的用户都具有相同的权限，同时也是超级管理员，也就对hive中的所有表都有查看和改动的权利，这样是不符合一般数据仓库的安全原则的。Hive可以是基于元数据的权限管理，也可以基于文件存储级别的权限管理，此次以介绍MetaData权限管理为主。通过以下配置开启Hive身份认证功能进行权限检查：
hive.se...
分类：
其他好文 时间：
2014-07-08 14:06:26
阅读次数：
192
日志文件系统（journaling file systems）可防止系统崩溃时导致的数据不一致问题。对文件系统元数据（metadata）的更改都被保存在一份单独的日志里，当发生 系统崩溃时可以根据日志正确地恢复数据。除此之外，日志使系统重新启动时不必进行文件系统的检查，从而缩短了恢复时间。1. 元数...
分类：
其他好文 时间：
2014-07-07 13:19:14
阅读次数：
208
说在，开篇之前很早就有说说Metadata（元数据）和IL（中间语言）的想法了，一直在这篇开始才算脚踏实地的对这两个阶级兄弟投去些细关怀，虽然来得没有《第一回：恩怨情仇：is和as》那么迅速，但是Metadata和IL却是绝对重量级的内容，值得我们在任何时间关注，本文就是开始。1 引言你可曾想到，我...
分类：
其他好文 时间：
2014-07-07 08:17:04
阅读次数：
214
书接上回[第二十四回：认识元数据和IL（上）]，我们对PE文件、程序集、托管模块，这些概念与元数据、IL的关系进行了必要的铺垫，同时顺便熟悉了以ILDASM工具进行反编译的基本方法认知，下面是时候来了解什么是元数据，什么是IL这个话题了，我们继续。很早就有说说Metadata（元数据）和IL（中间语...
分类：
其他好文 时间：
2014-07-07 00:58:21
阅读次数：
350
一、SecondaryNameNode用途 SNN是用来保存namenode中对HDFS metadata的信息的备份，并减少namenode重启的时间，SNN进程默认运行在 namenode 机器上，如果这台机器出错，宕机，对恢复HDFS文件系统是很大的灾难，因此最佳方式是将SNN进程配置在另外....
分类：
其他好文 时间：
2014-07-01 21:53:52
阅读次数：
334
