毫无疑问,我们已经进入了大数据(BigData)时代。人类的生产生活每天都在产生大量的数据,并且产生的速度越来越快。根据IDC和EMC的联 合调查,到2020年全球数据总量将达到40ZB。2013年,Gartner将大数据列为未来信息架构发展的10大趋势之首。Gartner预测将在 2011年到20...
分类:
其他好文 时间:
2015-06-28 21:33:38
阅读次数:
209
MRQL is a query processing and optimization system for large-scale, distributed data analysis, built on top of Apache Hadoop, Hama, Spark, and Flink....
分类:
Web程序 时间:
2015-05-25 16:47:38
阅读次数:
176
http://www.infoq.com/articles/bigdata-analytics-for-securityThis article first appeared in the IEEE Security & Privacymagazine and is brought to you b...
分类:
其他好文 时间:
2015-05-19 00:33:09
阅读次数:
147
ArcGIS和Hadoop之间的故事之二
一个是GIS界的大牛,一个是BigData界的主流。下面我们来看看ArcGIS在这方面所做的工作。...
分类:
其他好文 时间:
2015-04-28 14:15:57
阅读次数:
157
大数据的生态系统图Thinking in BigData(八)大数据Hadoop核心架构HDFS+MapReduce+Hbase+Hive内部机理详解浅谈Apache Spark的6个发光点大数据,首先你要能存的下大数据。传统的文件系统是单机的,不能横跨不同的机器。HDFS(Hadoop Distr...
分类:
其他好文 时间:
2015-04-23 13:09:49
阅读次数:
176
用scala实现读取oracle数据增加oralce的jar包后package cn.bigdata.scala.oracleimport java.sql.{DriverManager, Connection, ResultSet}object ConnectOracle { val use...
分类:
数据库 时间:
2015-04-21 12:50:52
阅读次数:
334
public class ReadWriteBigData { /* create database bigdata; use bigdata; create table bigdata //创建表 ( id varchar(20)primary key, pinglun ...
分类:
数据库 时间:
2015-04-04 21:13:08
阅读次数:
219
/**LicensedtotheApacheSoftwareFoundation(ASF)underoneormore*contributorlicenseagreements.SeetheNOTICEfiledistributedwith*thisworkforadditionalinformationregardingcopyrightownership.*TheASFlicensesthisfiletoYouundertheApacheLicense,Version2.0*(the"License");..
分类:
其他好文 时间:
2015-03-09 01:49:40
阅读次数:
390
为spark编写UDFcache:作业介绍https://github.com/cs186-spring15/course/tree/master/hw2我花了点时间做了下,觉得是学习sparksql和scala的好材料。现在把我写的作业记录如下:Task#1:ImplementingDiskPartitionandGeneralDiskHashedRelationTask#2:ImplementingobjectDiskHa..
分类:
其他好文 时间:
2015-03-05 15:01:48
阅读次数:
306
文章出处:http://blog.csdn.net/lili72
环境cenos5.9 安装在192.168.119.131上进行.安装路径统一为/home/bigdata/
1 安装之前需要先安装:
1.1 openssl
1.1.1 下载 ,cd /home/bigdata/ wget http://www.openssl.org/source/openssl-...
分类:
其他好文 时间:
2015-01-31 21:53:26
阅读次数:
277