1.安装
Linux下直接apt-get install git 或者 apt-get install git-core 即可
2.创建版本库
进入目录 git init 此时会生成一个.git的目录，用来管理你的这个目录下的版本，一般不要动.git目录。
3.添加文件，并提交
git add filename 可以看作将文...
分类：
系统相关 时间：
2014-05-23 08:14:08
阅读次数：
374
Hadoop 的优势
Hadoop 是 一 个 能 够 让 用 户 轻 松 架 构 和 使 用 的 分 布 式 计 算 平 台。 用 户 可 以 轻 松 地 在Hadoop 上开发运行处理海量数据的应用程序。它主要有以下几个优点:
1.高可靠性。Hadoop 按位存储和处理数据的能力值得人们信赖。
2.高扩展性。Hadoop 是在可用的计算机集簇间分配数据完成计算任务的, 这些集簇可以方便地...
分类：
其他好文 时间：
2014-05-22 12:26:27
阅读次数：
217
作者在工作中遇到了类似流式数据实时接入的业务场景，所以对淘宝的实时数据仓库这一块做了一些调研和了解。本文从业务场景和设计上介绍了淘宝的TimeTunnel工具，文中的图片来自淘宝数据仓库团队交流过程中的sildes，也参考了一些相关文档。
业务背景
TimeTunnel（简称TT）是一个基于thrift通讯框架搭建的实时数据传输平台，具有高性能、实时性、顺序性、高可靠性、高可用性、可扩展性等特点（基于Hbase）。
目前TimeTunnel在阿里巴巴广泛的应用于日志收集、数据监控、广告反馈、量子统计、数据...
分类：
其他好文 时间：
2014-05-22 10:58:59
阅读次数：
334
简介
此文档描述了一个超级用户如何在安全的方式下以另一用户的名义提交作业或访问hdfs。
Use Case
下一部分描述的的代码示例对此用户用例是可用的。
一个用户名为'super'的超级用户想要以另一用户joe的名义提交作业或访问hdfs。超级用户有kerberos证书但是用户joe并没有。任务要求以用户joe的角色运行并且namenode上的文件访问也需要由joe完成。需要用户...
分类：
其他好文 时间：
2014-05-22 10:40:41
阅读次数：
255
这篇文章不提原理，讲讲hadoop及其周边项目的作用。
hadoop这个词已经流行好多年了，一提到大数据就会想到hadoop，那么hadoop的作用是什么呢？
官方定义：hadoop是一个开发和运行处理大规模数据的软件平台。核心词语是平台，也就是说我们有大量的数据，又有好几个电脑，我们知道应该把处理数据的任务分解到各个电脑上，但是不知道怎样分配任务，怎样回收结果，hadoop大概就帮助我们做了...
分类：
其他好文 时间：
2014-05-22 10:34:39
阅读次数：
288
第一种：
1、进旧站后台：系统管理→数据库备份。单击下部“全选”后“提交”进行备份；
2、将旧站的所有文件上传到新站点，删除install目录下的install.lock文件；
3、象安装全新站点一样进行网站初始化安装；
4、进入新站后台：系统管理→数据库还原。同样“全选”，然后单击“提交”进行数据库还原。
5、后台进入“HTML更新”，选择“一键更新网站”。
OK...
分类：
其他好文 时间：
2014-05-22 08:59:15
阅读次数：
453
版本：CDH5.0.0 （hdfs:2.3，mapreduce：2.3，yarn：2.3）hadoop多文件格式输入，一般可以使用MultipleInputs类指定不同的输入文件路径以及输入文件格式。比如现在有如下的需求：现有两份数据：phone：123,good number
124,common number
125,bad numberuser：zhangsan,123
lisi,124
w...
分类：
其他好文 时间：
2014-05-22 06:23:52
阅读次数：
391
关于Windows通过远程桌面访问Ubuntu
问题及目标
Window环境通过远程桌面访问Ubuntu
Ubuntu机器端
1、 安装所需软件包
sudoapt-get install xrdp
sudo apt-get install vnc4server tightvncserver...
Cash MachineTime Limit:1000MSMemory
Limit:10000KTotal Submissions:26172Accepted:9238DescriptionA Bank plans to
install a machine for cash withdrawal. ...
分类：
其他好文 时间：
2014-05-20 10:55:48
阅读次数：
270
准备用Django开发网站，豆瓣阅读中有《Django入门》，里面有人批注说用virtualenv+pip很好。每次搞个什么都感觉举步维艰，因为之前太懒了，什么都懒得深入看一下。pip一直用，但是就是搞不清楚和apt-get,
easy_install, setuptools有什么区别。所以说，很多...
分类：
其他好文 时间：
2014-05-20 08:58:52
阅读次数：
312
