摘要：Hadoop之HDFS文件操作常有两种方式，命令行方式和JavaAPI方式。本文介绍如何利用这两种方式对HDFS文件进行操作。...
分类：
其他好文 时间：
2014-06-20 13:33:46
阅读次数：
151
摘要：近日，Robert
Seaton整理了100多个最有趣的数据集，其中包括Jeopardy真题，死囚的最后一句话，20万个Eclipse
Bug，足球比赛相关，柏拉图式的爱情，太阳系以外的行星，11.3万个恐怖事件等。【编者按】在数据爆发式增长的逼迫下，当下数据分析能力已得到长足的发展，机器学习...
分类：
系统相关 时间：
2014-06-11 09:25:52
阅读次数：
717
I/O 1.文件操作：File（1）voidAppendAllText(string
path, string contents)（2）boolExists(string path)（3）string[]Read...
分类：
其他好文 时间：
2014-06-10 00:58:28
阅读次数：
535
百亿数量级的大数据项目，软硬件总体预算只有30万左右，需求是进行复杂分析查询，性能要求多数分析请求达到秒级响应。
遇到这样的项目需求，预算不多的情况，似乎只能考虑基于Hadoop来实施。
理论上Hadoop撑住百亿数量级没问题，但想要秒级响应各种查询分析就不行了。我们先大概分析一下Hadoop的优缺...
分类：
其他好文 时间：
2014-06-09 14:32:39
阅读次数：
509
最近在做文件传输，发现在android下用f系列的C库函数去读取文件文件大小会受到2G大小的约束，查阅了很久，最后只能去看google的libc源码，发现了以下几个问题：
1、bionic的libc是谷歌基于bsd开发的，大约200k左右，比gnu的libc小一半左右，也比uClibc小，谷...
分类：
其他好文 时间：
2014-06-08 20:11:58
阅读次数：
224
php-数据分析 余弦相似度实现
<?php
/**
* 数据分析引擎
* 分析向量的元素 必须和基准向量的元素一致，取最大个数，分析向量不足元素以0填补。
* 求出分析向量与基准向量的余弦值
* @author yu.guo@okhqb.com
*/...
分类：
Web程序 时间：
2014-06-08 17:33:51
阅读次数：
210
对于诸多行业客户，在平时工作实践中，会产生大量的财务数据、交易数据，以及基于这些数据的计算过程和结果。如何将此类数据的采集、编辑、加工、汇总、整理、存储、产生分析报告，得到有效信息，工作量极大，人工成本昂贵，并且繁琐，存在风险。如果客户的工作报告生成系统为人工制作，操作风险会比较高，数据需人工采集编辑，未来产品数量和数据爆发式增长，现有制作报告人力会面临制作时效较长、缺失系统管理、无法有效完成报告查询定位等风险，间接影响客户服务体验。基于此，构建一个行业客户工作报告生成配套管理系统，从报告的出生到接触到最终...
分类：
其他好文 时间：
2014-06-08 15:07:56
阅读次数：
215
商宝商宝是基于微博移动的社交购物平台，通过商宝打通微博等社交平台商品展示、粉丝营销、订单支付、数据分析等环节，商宝可提供丰富的营销工具和活动插件。商宝展示的商品信息可以分享到各个社交网络的信息流中，实现商品的快速传播和售卖，使用商宝的商家仅需在商宝管理后台统一管理商品营销和订单即可。产品简介商宝，由...
分类：
移动开发 时间：
2014-06-08 00:38:15
阅读次数：
228
在上文介绍了C中文件操作的一些基本函数，下面给一个简单例子，完成从控制台输入一段字符串，然后将其写入文件，然后从文件中读出刚刚写入的内容，代码如下：
#include
#include
#include
const int LENGTH=80;
int main(void){
char mystr[LENGTH];
int lstr=0;
int mychar=0;
...
分类：
其他好文 时间：
2014-06-07 15:32:08
阅读次数：
186
和SPL一样，在PHP手册里面，流被划为“other basic extensions”里面，是PHP开发中一个容易被忽视的函数系列。但其实在C++/Java中，流是一个很重要的概念。流的概念源于UNIX中的管道，管道是一条不间断的字节流，用来实现程序和进程间通信，或者读写外设，外部文件等。
流的概念是在php 4.3.0中被引入的。我们知道，文件操作，网络操作，数据压缩操作等具...
