码迷,mamicode.com
首页 >  
搜索关键字:大数据 scala    ( 16997个结果
大数据行业里的两大误区
http://www.cognoschina.net/club/thread-68835-1-1.htmlhttp://www.cognoschina.net/club/thread-68837-1-1.html大数据行业里的误区 大数据这个词,恐怕是近两年IT界炒的最热的词汇之一了,各种、会议,....
分类:其他好文   时间:2014-08-19 14:23:34    阅读次数:209
大数据自动挖掘”才是现在这些大数据的真正意义
http://www.cognoschina.net/club/thread-66425-1-1.html 仅供参考“大数据自动挖掘”才是现在这些大数据的真正意义 现在大数据火得不行,几乎人人都在说大数据,但到底什么是大数据,恐怕没有多少人知道,鱼目混珠的人太多。 大数据不是指很多很多数据。 ...
分类:其他好文   时间:2014-08-19 14:20:54    阅读次数:157
分布式消息系统 Kafka 简介
Kafka是分布式发布-订阅消息系统。它最初由LinkedIn公司开发,之后成为Apache项目的一部分。Kafka是一个分布式的,可划分的,冗余备份的持久性的日志服务。它主要用于处理活跃的流式数据。 在大数据系统中,常常会...
分类:其他好文   时间:2014-08-19 13:03:24    阅读次数:475
实例:如何使用 Netty 下载文件
本实例主要参考的是官网的examples:点击这里 使用场景:客户端向Netty请求一个文件,Netty服务端下载指定位置文件到客户端。 本实例使用的是Http协议,当然,可以通过简单的修改即可换成TCP协议。 需要注意本实例的关键点是,为了更高效的传输大数据,实例中用到了ChunkedWriteHandler编码器,它提供了以zero-memory-copy方式写文件。 第一步:先写一个...
分类:Web程序   时间:2014-08-19 12:55:04    阅读次数:387
原创 Datareader 导出为csv文件方法
DataReader 是游标只读数据, 如果是大数据导出,用Datatable 将耗费巨大内存资源。因为Datatable 其实就是内存中的一个数据表代码如下/// /// SqlDataReader 生成csv文件 /// /// 文件名(包含文件路径...
分类:其他好文   时间:2014-08-19 10:36:23    阅读次数:225
Scala类
要点 类中的字段自动带有getter方法和setter方法可以用定制的getter/setter方法替换掉字段的定义,而不必修改使用类的客户端----这就是“统一访问原则”用@BeanProperty注解来生成JavaBeans的getXxx/setXxx方法每个类都有一个主要的构造器,这个构造器和类定义“交织”在一起。它的参数直接成为类的字段,主构造器执行类体中所有的语句。辅助构造器是...
分类:其他好文   时间:2014-08-18 22:07:54    阅读次数:358
Scala IDE黑色主题设置
网上大部分资料都是设置文本编辑区域的主题,这篇文章主要介绍如何设置UI主题。网上也有许多设置UI主题的资料,不过都是跟Eclipse相关,而Scala IDE虽然也是基于Eclipse,但还是有区别的,主要是没有Scala IDE Eclipse安装目录下没有dropins子目录。下面介绍下Scala IDE的UI主题安装方法。 下载Eclipse Moonrise UI Theme 0...
分类:其他好文   时间:2014-08-18 20:29:52    阅读次数:315
怎样才能充分利用SQL索引
背景:目前WEB的普及太快,很多网站都会因为大流量的数据而发生服务器习惯性死机,一个查询语句只能适用于一定的网络环境.没有优化的查询当遇上大数据量时就不适用了.
分类:数据库   时间:2014-08-18 20:06:42    阅读次数:313
利用Tsunami UDP将大数据迁移至云中
当你的数据规模达到PB级别的时候,想要移动这样大规模数据时就会变的费时费力,这也是企业在利用AWS规模化和弹性优势处理分析任务时面临的最大挑战之一。本文主要介绍了加速文件传输协议,谈到如何利用Tsunami DUP实现将大规模数据迁移到云中,其中利用UDP处理数据传输,TCP负责连接控制。...
分类:其他好文   时间:2014-08-18 18:45:49    阅读次数:310
zencart加大数据表字段长度
批量表产品名称过长导致被截断的情况,是由于产品名称超出了数据库表中字段设置的最大长度,下面通过修改数据库表字段长度来避免此类情况发生:ALTER TABLE categories MODIFY categories_image varchar(256) ;ALTER TABLE categories...
分类:其他好文   时间:2014-08-18 18:01:32    阅读次数:265
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!