稍微了解Spark源码的人应该都知道SparkContext，作为整个Project的程序入口，其重要性不言而喻，许多大牛也在源码分析的文章中对其做了很多相关的深入分析和解读。这里，结合自己前段时间的阅读体会，与大家共同讨论学习一下Spark的入口对象—天堂之门—SparkContex。SparkC...
分类：
其他好文 时间：
2014-06-28 19:27:40
阅读次数：
338
fishman JMJ_API 1.0 system ${project.basedir}/lib/JMJ_API.jar 注意1.system2.${project.basedir}/...
分类：
其他好文 时间：
2014-06-27 17:18:36
阅读次数：
281
原文来自于：http://www.infoq.com/cn/articles/new-idea-of-nodejs-asynchronous-processing-tasks?utm_source=infoq&utm_medium=popular_links_homepageNode.js擅长数据密...
分类：
Web程序 时间：
2014-06-25 21:21:47
阅读次数：
436
很多侧滑的应用都用的是开源库SlidingMenu, 效果不错，以下是我用上的效果图，由于最近换成了IDEA(IntelliJ)编辑器，昨天上网找了好多教程都是关于在Eclipse导入的方法，摸索着最后也把它导入成功并可以引用了，特此总结了两种IDE的添加方法，分享给大家，最后再简单介绍下该开源库的使用方法。
图 SlidingMenu 侧滑- 搜索歌手
一...
分类：
系统相关 时间：
2014-06-25 20:03:38
阅读次数：
442
Intellij IDEA作为最好的Java IDE，创建Maven项目还是比较简单的，但是创建一个Maven Web项目还是要修改一些配置的，下面进行总结整理...
分类：
Web程序 时间：
2014-06-25 10:26:10
阅读次数：
305
每天早上到公司第一件事打开电脑，打开我的qq，我的开发工具idea，在看看邮件，日复一日，变懒了，也变聪明了，写了下面一段脚本
文件名：mystart.sh
#!bin/bash
#检验我的开发工具是否已经启动，如果没有启动，启动程序，并在终端打印简单启动信息
ideaNum=`ps -ef | grep idea | awk '{print $2}' | wc -l`...
分类：
系统相关 时间：
2014-06-24 23:16:30
阅读次数：
312
org.apache.flume.sink.AvroSink是用来通过网络来传输数据的，可以将event发送到RPC服务器（比如AvroSource），使用AvroSink和AvroSource可以组成分层结构。它继承自AbstractRpcSink extends AbstractSink implements Configurable这跟其他的sink一样都得extends Abstract...
分类：
编程语言 时间：
2014-06-24 16:01:30
阅读次数：
303
org.apache.flume.source.SpoolDirectorySource是flume的一个常用的source，这个源支持从磁盘中某文件夹获取文件数据。不同于其他异步源，这个源能够避免重启或者发送失败后数据丢失。flume可以监控文件夹，当出现新文件时会读取该文件并获取数据。当一个给定的文件被全部读入到通道中时，该文件会被重命名以标志已经完成。同时，该源需要一个清理进程来定期移除完成...
分类：
编程语言 时间：
2014-06-24 15:59:37
阅读次数：
287
对自己使用的IDE进行jvm的调优
首先进行日志输出配置
Eclipse 修改eclipse.ini
IDEA 修改 idea.exe.vmoptions
增加打印日志的配置参数
-XX:+PrintGCTimeStamps
-XX:+PrintGCDetails
-verbose:gc
-Xloggc:cc_gc.log
之后启动IDE,查...
分类：
系统相关 时间：
2014-06-22 16:59:06
阅读次数：
372
OceanBase要求schema强类型约束，也就是要预先定义好schema。这与传统的数据库基本相同，与很多nosql的schema-free大相径庭。
也就是说，OceanBase的数据模式是基于关系模型的。关系模型通过关系分解消除数据结构的复杂性，获得了对数据查询的能力和灵活性。而关系模型的缺点也是因为关系分解，使得在需要“组装”的数据时要进行join操作，而join则是相当耗时的操作。
大部分的NoSQl产品以MongoDb为代表，是基于文档模型的，...
分类：
数据库 时间：
2014-06-22 14:52:00
阅读次数：
333
