码迷,mamicode.com
首页 >  
搜索关键字:sql 优化 hive 大数据 hadoop    ( 146147个结果
Hadoop初学指南(5)--MapReduce入门
本文将介绍Hadoop中的重点MapReduce的入门知识。(1)MapReduce概述MapReduce是一种分布式计算模型,由Google提出,主要用于搜索领域,解决海量数据的计算问题。MR由两个阶段组成:Map和Reduce,在Hadoop中用户只需要实现map()和reduce()两个函数,即可实现分布式计算,非常简单..
分类:其他好文   时间:2014-05-03 01:53:48    阅读次数:519
Hadoop初学指南(6)--MapReduce的简单实例及分析
本文在上一节的基础上通过一个简单的MR示例对MapReduce的运行流程进行分析。假设有两行数据,分别是helloyou,hellome,我们要统计其中出现的单词以及每个单词出现的次数。所得的结果为hello2you1me1(1)大致运行流畅1.解析成2个<k,v>,分别是<0,helloyou><10,hel..
分类:其他好文   时间:2014-05-03 01:51:40    阅读次数:382
HDFS追本溯源:租约,读写过程的容错处理及NN的主要数据结构
Lease 的机制:hdfs支持write-once-read-many,也就是说不支持并行写,那么对读写的互斥同步就是靠Lease实现的。Lease说白了就是一个有时间约束的锁。客户端写文件时需要先申请一个Lease,对应到namenode中的LeaseManager,客户端的client name就作为一个lease的holder,即租约持有者。LeaseManager起什么作用呢? 读写过程的容错是怎么做的?数据块是如何复制的?数据块的恢复机制?本文都有涉及。...
分类:其他好文   时间:2014-05-02 23:22:14    阅读次数:450
MSSQL查询第五条到第十条数据
查询数据库中第五条数据到第十条数据,分两种情况: 1,ID是连接的,当然这种情况比较好查。直接SELECT就可以了,取ID大于5小于10就可以了, 这种情况比较少。 2,ID不是连接的,如果要取第五条数据到第十条数据,就得从SQL查询SELECT着手 select top 10 * from TB1 where Id not in (select top 5 Id ...
分类:数据库   时间:2014-05-02 22:58:20    阅读次数:597
SQL Server分析服务的权限配置
本文介绍如何配置SSAS数据库和cube相关维度的安全设置。...
分类:数据库   时间:2014-05-02 21:20:49    阅读次数:599
sqlite C/C++ API
官网:https://sqlite.org/download.html 下载代码安装三步走: ./configure // ./configure --help查看安装参数设置,学习configure的配置,明白安装后include、lib、bin等文件的位置 make make install 学习SQL基本语法,各个数据库基本相同http://www.w3cschool.cc...
分类:数据库   时间:2014-05-02 20:50:33    阅读次数:412
Ubuntu14下Hadoop开发<1> 基础环境安装
在Ubuntu14.04下使用Hadoop2.4进行大数据开发之基础环境准备篇...
分类:其他好文   时间:2014-05-02 19:56:21    阅读次数:367
腾讯、网易、新浪新闻网站爬虫编写记录及评论格式分析
先说说看这篇博客你能知道什么:1 腾讯、网易、新浪不同新闻的地址格式以及评论内容的地址格式(返回数据为json的异步接口);2 一些比较通用的设计方法,对软件设计的菜鸟可能有帮助; 之前也说了要写这边博客,现在终于写出来了。我的毕业设计的指导老师说毕设论文的字数不够……所以我决定把这些本不应该出现在论文中的实现细节凑到论文中。至于下面说到的东西要解决什么问题,各位可以先看看这个网站(我毕设的初步结果,目前还在优化中,包括代码结构还有UI设计):http://reetseenews.duapp.com/ 这个...
分类:Web程序   时间:2014-05-02 06:50:01    阅读次数:436
关于在java中向带有IN的SQL语句中传参数的问题
今天遇到俩个问题:1.在使用表格模型的时候,从数据库查询出来的数据赋值到Jtable的时候永远只显示最后一天记录,前面的都被覆盖了。一直在究其原因,未果,遂择其道而行之(第二个问题)。2.为了解决上面的问题,我将SQL语句的条件换成IN,目的想把所有参数一并传过去,查询所..
分类:数据库   时间:2014-05-02 03:24:03    阅读次数:495
Microsoft SQL Server 2012 R2部署安装
MicrosoftSQLServer2012R2部署安装SQLServer的安装相对于其他服务来说还是比较简单的,插入光盘,点击“Setup”打开“SQLServer安装中心”,在安装中心界面我们可以通过“计划”“安装”“维护”“工具”“资源”“高级”“选项”进行系统安装,信息查看以及系统设置,首先,点..
分类:数据库   时间:2014-05-02 03:13:16    阅读次数:364
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!