码迷,mamicode.com
首页 >  
搜索关键字:大数据 spark    ( 18881个结果
数据挖掘——数据预处理
数据预处理(Data Preprocess):通过采用数据清理、数据集成与变换以及数据规约等方法对数据预先进行处理,处理后的数据用于数据挖掘。在当前社会中,由于大数据、数据源不唯一等原因使得在真实数据库存放的数据存在噪声、缺失和不一致的问题。基于数据的信息挖掘在数据不能保证的情况下,挖掘得到的信息也...
分类:其他好文   时间:2014-07-31 19:33:40    阅读次数:258
在AcGIS中用大数据生成DEM
在ArcGIS中生成DEM时,采用的数据源往往是一些高程点、等高线,这些高程点、等高线比较密集,可能有好几千万个,甚至上亿个高程点、等高线。若利用这些矢量数据生成TIN,一般是不能实现的,因为生成TIN时,支持的最大结点数只能有几千万个(依据电脑性能,受限于内存)。另外矢量信息的存储也是比较讲究的,如果把这些矢量信息存储在shp文件中,往往会出现问题(比如在arcmap中加载时出现的绘制错误)。综...
分类:其他好文   时间:2014-07-31 17:03:27    阅读次数:296
网摘 SQL Server
http://soft.chinabyte.com/database/215/12374715.shtml.软件与服务我们也在这里:. 企业计算 大数据 存储 软件与服务 数据库/开发 服务器 操作系统 网 络 安 全. 您的位置: 比特网 > 软件与服务 > 正文 . 分享一个 SQLSERVER...
分类:数据库   时间:2014-07-31 16:05:06    阅读次数:313
初识mongodb
1.mongodb是一种noSQL的文档型数据库,它存储的数据格式是BSON(JSON的一种扩展),支持二进制的数据存储,包括大数据的视频,图片等。2.mongodb是使用c++开发的,源代码是完全开源的,可共享。3.mongodb模式自由,由于数据库中存储的是json文档,在java中,DBCol...
分类:数据库   时间:2014-07-31 12:39:06    阅读次数:275
归档和解档
对于系统定义不可变的类型的对象,复制时不会产生新的对象【ns numb string array dictionary】r只写r+xie读w只读w+清理完在写a追加a+数据持久化NSUserDefaults 只能存系统定义的类型,不能存太多或是大数据,可用于系统偏好设置;plist不能存自定义的.....
分类:其他好文   时间:2014-07-31 09:36:16    阅读次数:328
转基因(转载)
我们这个国家能不能不这么2?谈谈转基因。[引用]网上流传一个段子:说,大航海时代,我们禁海。大工业时代,我们的慈禧不让修铁路。大贸易时代,我们反帝反修。大数据时代,我们限制因特网。我们这个国家能不能不这么2?呵呵,我还要加上一句,在生物学大革命时代,我们反对‘转基因’。。。19世纪生物学最伟大发现:...
分类:其他好文   时间:2014-07-31 09:33:25    阅读次数:200
敏捷数据科学:用Hadoop创建数据分析应用
敏捷数据科学:用Hadoop创建数据分析应用(数据分析最佳实践入门敏捷大数据首作分步骤|全流程演示思路、工具与方法)【美】RussellJurney(拉塞尔·朱尔尼)著冯文中朱洪波译ISBN978-7-121-23619-82014年7月出版定价:49.00元184页16开编辑推荐对大数据的挖掘需要投入大量的人力..
分类:其他好文   时间:2014-07-31 03:19:17    阅读次数:410
大数据分页解决方案
基于oracle的大数据分页...
分类:其他好文   时间:2014-07-31 00:06:45    阅读次数:199
telematics product and company in China
Telematics总的来看,后装OBD市场日渐繁荣,但是应用深度不够;前装infotainment受限于产量和商业模式,举步维艰。 车联网作为汽车信息化的起点,会有泡沫,也会在大数据和物联网的浪潮中逐步积淀,形成一些利基行业和公司。...
分类:其他好文   时间:2014-07-31 00:06:35    阅读次数:1697
pyspark原理简介
这是前段时间在看spark的python支持的时候,简单过了一下pyspark里的python代码,整理了一个大致流程。虽然几乎不会python,但基本上能看懂pyspark是怎么让不同虚拟机之间传输数据的、如何在python环境调用java类的、pyspark SDK的丰富程度取决于什么、需要做些什么流程和封装等。 我看了下,应该只有Pyspark Internals这篇wiki里介绍了pyspark的实现机制,大体是下面这张图就可以表示...
分类:其他好文   时间:2014-07-31 00:01:36    阅读次数:515
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!