Sqoop即 SQL to Hadoop ，是一款方便的在传统型数据库与Hadoop之间进行数据迁移的工具，充分利用MapReduce并行特点以批处理的方式加快数据传输，发展至今主要演化了二大版本，Sqoop1和Sqoop2。
Sqoop工具是hadoop下连接关系型数据库和Hadoop的桥梁，支持关系型数据库和hive、hdfs，hbase之间数据的相互导入，可以使用全表导入和增量导入。
那么为什么选择Sqoop呢？
高效可控的利用资源，任务并行度，超时时间。 数据类型映射与转化，可自动进行，用户...
分类：
其他好文 时间：
2014-10-21 19:42:33
阅读次数：
651
先说下背景，项目以前一直使用EntityFramework中的自动迁移功能，虽然一开始就知道存在一些不妥的地方，但由于时间原因一直没有更改这个方式，而这一次由于协同开发的人越来越多不得不进行改造。 为什么不再使用EntityFramework的自动迁移功能 1.迁移过程不可控 EntityFrame...
分类：
其他好文 时间：
2014-10-20 16:50:59
阅读次数：
212
特别声明： 提供的源代码已经包含了 AppBoxPro 的全部源代码，用 VS2012 打开项目后，直接 Ctrl+F5 可以运行起来（默认使用VS自带的LocalDB数据库）。 FineUIPro是商业程序，仅包含v1.7.0公测版的DLL；当然你也...
分类：
移动开发 时间：
2014-10-17 12:14:12
阅读次数：
303
说明：1、为了测试方便，这里对存储过程的执行是模拟的2、这里限制了并发执行存储过程的最大个数，但并没有对并发线程数进行控制，与文章标题略有不符，但程序稍做改动即可控制并发线程数代码：using System;using System.Collections.Generic;using System....
分类：
编程语言 时间：
2014-10-16 17:25:22
阅读次数：
310
1.js放在head中会立即执行，会阻塞后续的资源下载与执行。因为js有可能会修改dom，如果不阻塞后续的资源下载，dom的操作顺序不可控。2.js的执行依赖前面的样式。即只有前面的样式全部下载完成后才会执行js，但是此时外链css和外链js是并行下载的。3.js放在body的最后面，可以避免资源阻...
分类：
Web程序 时间：
2014-10-16 13:26:32
阅读次数：
201
需求：客户的数据同时存在在另外一个不可控的系统中，需要和当前系统同步。思路：自动登录另外一个系统，然后抓取数据，同步到本系统中。技术点：模拟用户登录；保存登录状态；抓取数据/// /// visit the target url /// /// ...
List恐怕是日常代码里最常用的集合类型之一了，此子大多数情况下工作情况良好，但凡事都有例外了。 加入你正在写一个服务端项目，对稳定性有着极高的要求，这时就要多考虑一些因素了，就拿这个List来说吧。 一、先说说List的内部机理 其实很简单，内部就是一个数组，当添加一个新元素T时，首先判...
分类：
编程语言 时间：
2014-10-14 17:34:29
阅读次数：
252
前不久项目开发过程中，使用的是Entity Framework做数据处理。因为本人也不是对EF太有研究，只是会用而已，但是在一次需要查询的结果需要关联3、4个表来查询出来结果，并且对查询效率也有要求。但是个人觉得遇到这样的情况还是使用原始SQL语句来查询更为可控（或许EF中有更好的方法可以解决此类问...
分类：
数据库 时间：
2014-10-13 14:58:29
阅读次数：
272
Uploadify是JQuery的一个上传插件，实现的效果非常不错，带进度显示。它的功能特色总结如下：支持单文件或多文件上传，可控制并发上传的文件数在服务器端支持各种语言与之配合使用，诸如PHP,.NET,Java……通过参数可配置上传文件类型及大小限制通过参数可配置是否选择文件后自动上传易于扩展，...
分类：
Web程序 时间：
2014-10-10 14:53:54
阅读次数：
1545
display:block就是将元素显示为块级元素. block元素的特点是： 总是在新行上开始； 高度，行高以及顶和底边距都可控制； 宽度缺省是它的容器的100%，除非设定一个宽度 , , , , 和 是块元素的例子。 display:inline就是将元素显示为行内元素. inl...
分类：
其他好文 时间：
2014-10-09 13:58:33
阅读次数：
140
