摘要：DataFrame API的引入一改RDD API高冷的FP姿态，令Spark变得更加平易近人。外部数据源API体现出的则是兼容并蓄，Spark SQL多元一体的结构化数据处理能力正在逐渐释放。
关于作者：连城，Databricks工程师，Spark committer，Spark SQL主要开发者之一。在4月18日召开的 2015 Spark技术峰会 上，连城将做名为“四两拨千斤...
分类：
数据库 时间：
2015-04-03 19:26:28
阅读次数：
322
为防止重要文件因多个线程同时操作,造成其中内容被覆盖,可以使用PHP自带的文件锁机制flock简单代码如下 $fp = fopen("log.txt","a"); flock($fp, LOCK_EX) ; fwrite($fp,"执行日期：".strftime("%Y%m%d...
分类：
其他好文 时间：
2015-04-03 09:06:53
阅读次数：
125
开始是使用file_get_contents,和file_put_contents()读取和写入文件，结果当同一时间大量请求时，文件内容就会出现重置为空的现象，导致原始内容丢失网上找了个解决办法，经修改如下：function pageCount($fileName){ if ($fp = fo...
分类：
其他好文 时间：
2015-03-31 19:36:18
阅读次数：
153
数据块I/O:fread与fwrite
函数原型：
size_t fread(void *buffer,size_t size, size_t count,FILE *fp)
size_t fwrite(void *buffer,size_t size, size_t count,FILE *fp)功能：读/写数据块 返值：成功，返回读/写的块数；出错或文件尾，返回0...
分类：
其他好文 时间：
2015-03-31 09:13:05
阅读次数：
160
函数原型：
char *fgets(char *s,int n,FILE *fp)
int fputs(char *s,FILE *fp)功能：从fp指向的文件读/写一个字符串
返值：
fgets正常时返回读取字符串的首地址；出错或文件尾，返回NULL
fputs正常时返回写入的最后一个字符；出错为EOFfputs把s指向的字符串写入fp指向的文件
fgets从fp所指文...
分类：
其他好文 时间：
2015-03-30 23:13:06
阅读次数：
129
Kafka.utils，顾名思义，就是一个工具套件包，里面的类封装了很多常见的功能实现——说到这里，笔者有一个感触：当初为了阅读Kafka源代码而学习了Scala语言，本以为Kafka的实现会用到很多函数编程(Functional Programming, FP)，结果目前来看，大部分还是很朴素地以...
分类：
其他好文 时间：
2015-03-30 17:48:59
阅读次数：
191
http://www.labfans.com/bbs/t11883/首先，你要确定你要把待输出的内容输出到哪里，是文件里还是commend window。fprintf是把数据以一定格式输出到一个文件里，disp是将提示字符串或变量值输出到commend window,还可以输出一个超链接。如：fp...
分类：
其他好文 时间：
2015-03-28 15:37:21
阅读次数：
113
1 #include 2 int count = 0; 3 FILE *fp; 4 5 int notDanger(int row,int j,int (*chess)[8]) { 6 int i,k,flag1 =0,flag2=0,flag3=0,flag4=0,flag...
分类：
其他好文 时间：
2015-03-19 00:43:19
阅读次数：
122
