一、join优化Join查找操作的基本原则：应该将条目少的表/子查询放在Join操作符的左边。原因是在Join操作的Reduce阶段，位于Join操作符左边的表的内容会被加载进内存，将条目少的表放在左边，可以有效减少发生内存溢出错误的几率。Join查找操作中如果存在多个join，且所有参与join的...
分类：
其他好文 时间：
2014-07-22 22:56:14
阅读次数：
238
Hive优化总结---by 食人花优化时，把hive sql当做map reduce程序来读，会有意想不到的惊喜。理解hadoop的核心能力，是hive优化的根本。这是这一年来，项目组所有成员宝贵的经验总结。长期观察hadoop处理数据的过程，有几个显著的特征:1.不怕数据多，就怕数据倾斜。2．对j...
分类：
其他好文 时间：
2014-07-22 22:55:15
阅读次数：
271
Hadoop的数据管理，主要包括Hadoop的分布式文件系统HDFS、分布式数据库HBase和数据仓库工具Hive的数据管理。
分类：
其他好文 时间：
2014-07-22 22:54:13
阅读次数：
243
在使用union all的时候，系统资源足够的情况下，为了加快hive处理速度，可以设置如下参数实现并发执行set mapred.job.priority=VERY_HIGH;set hive.exec.parallel=true;设置map reduce个数-- 设置map capacityset...
分类：
其他好文 时间：
2014-07-19 21:37:25
阅读次数：
264
Java—SSH(MVC)JAVA三大框架的各自作用 hibernate是底层基于jdbc的orm(对象关系映射)持久化框架，即：表与类的映射，字段与属性的映射，记录与对象的映射 数据库模型 也就是Model; struts提供的丰富标签是用于显示层View;同时struts也充当了实现Contro...
分类：
编程语言 时间：
2014-07-19 21:26:14
阅读次数：
246
Java 使用 JDBC 连接Access数据库需要掌握的技能1.Java SE基本技术2.懂点JDBC技术能够学到如何使用Java正确的连接JDBC环境window8.1 64位jdk6 32位Access 2013Eclipse 4.4下面是代码package com.malin.app;imp...
分类：
数据库 时间：
2014-07-19 21:21:42
阅读次数：
220
本笔记会不断更新，用来记录一下在WAS日常维护中的重启时机问题。在做WAS的维护过程中，生产环境要求最大可能的不要有中断，所以重启的时机其实是一个非常值得记住的东西，有的时候因为没有重启或者重启的java进程不正确而导致大量的时间浪费也是非常正常的。谨以此文记录一下我个人的经验总结：JDBC：1）....
分类：
其他好文 时间：
2014-07-19 20:03:09
阅读次数：
272
使用Spring提供的三个JDBC模板类（JdbcTemplate、NamedParameterJdbcTemplate、SimpleJdbcTemplate）操作数据库一、JdbcTemplate是Spring中最主要的JDBC模板， 利用JDBC和简单的索引參数查询对数据库进行简单訪问二、Nam...
分类：
数据库 时间：
2014-07-16 15:47:13
阅读次数：
363
课程讲师：张弘
课程分类：Java
适合人群：中级
课时数量：37课时
用到技术：Spring 3+JDBC+RMI的架构、jquery、工作流
涉及项目：项目管理系统
更新程度：完成
QQ 1269532055
本课程是某航空研究所的真正项目的缩影。实际项目价值217万，在课程中，将实际项目的业务进行了缩减，但是主要的技术点全部都讲解到了。课程内容虽然不多，但是麻...
分类：
数据库 时间：
2014-07-16 14:40:30
阅读次数：
251
需要用到的包：（这里只是其中一个版本，其他的百度）
mysql-connector-java-5.1.6-bin
mybatis-3.2.2
先看项目目录：
配置文件mybatisconfig.xml:
<!DOCTYPE configuration
PUBLIC "-//mybatis.org//DTD Config 3.0//EN"
"http://mybati...
分类：
其他好文 时间：
2014-07-16 13:47:07
阅读次数：
234
