(一)hadoop 相关安装部署1、hadoop在windows cygwin下的部署:http://lib.open-open.com/view/1333428291655http://blog.csdn.net/ruby97/article/details/7423088http://blog....
分类:
数据库 时间:
2014-07-22 22:50:55
阅读次数:
517
??
大家都知道EasyUI的Datagrid组件在加载大数据量时的优势并不是很明显,相对于其他一些框架,如果数据量达到几千,便会比较慢,特别是在IE下面。针对这种情况,我们首要做的是要相办法优化datagrid组件的各方面性能,不过任何事情都是可以变通解决的,virtualScrollView就是一种不错的解决方案。
virtualScrollView的准则就是尽量少画tr到table里,表...
分类:
Web程序 时间:
2014-07-22 22:49:13
阅读次数:
334
本周也没有学习到什么内容。跟自己相关的云计算的课还排在周日。就俗一点,也来谈谈什么是大数据思维。笼统地来说,是一种思维方式。也是一种考虑问题的逻辑结构。简单一点来说,就是根据已知推断未来的过程。复杂一点就是,根据大量的已知条件,通过相应的祛伪存真,然后根据..
分类:
其他好文 时间:
2014-07-20 10:35:27
阅读次数:
179
声明:个人原创,转载请注明出处。文中引用了一些网上或书里的资料,如有不妥之处请告之。本文是我阅读Hadoop 0.20.2第二遍时写的笔记,在阅读过程中碰到很多问题,最终通过各种途径解决了大部分。Hadoop整个系统设计精良,源码值得学习分布式的同学们阅读,以后会将所有笔记一一贴出,希望能方便大家阅...
分类:
其他好文 时间:
2014-07-20 00:37:27
阅读次数:
309
1)Hadoop学习总结 (1)HDFS简介 (2)HDFS读写过程解析 (3)Map-Reduce入门 (4)Map-Reduce的过程解析 (5)Hadoop的运行痕迹 (6)Apache Hadoop 版本2)Hadoop-0.20.0源代码分析 (1)Hadoop-0.20.0...
分类:
其他好文 时间:
2014-07-19 23:14:35
阅读次数:
208
Hadoop创始人 Doug Cutting,现任cloudera公司CTODoug Cutting解释Hadoop的得名 :“这个名字是我孩子给一个棕黄色的大象玩具命名的。我的命名标准就是简短,容易发音和拼写,没有太多的意义,并且不会被用于别处。小孩子恰恰是这方面的高手。”Hadoop是一个能够对...
分类:
其他好文 时间:
2014-07-19 13:38:13
阅读次数:
250
解决办法: 只能通过一些trick来减小生成的中间矩阵的大小。比如我所遇到的问题是:我要运行(W%*%H%*%t(H)) 这句话,(W的规模是5000000*10,而H的规模是10*100000)解释执行W%*%H的时候报错:不能有负长度矢量。坑爹的中文报错,google发现,和中文有关的R文档、....
分类:
其他好文 时间:
2014-07-19 12:25:50
阅读次数:
206
看牛腩视频有种相见恨晚的感觉,人类真的是很强大,让我们的编程语言越来越简单,实现的功能越来越强大,昨天听一个是个讲关于机房合作的经验,中间提到EA的强大,数据库的设计是越来越简单,EA可以生成代码,可以导出数据库,当时的感觉就是自己的知识真的匮乏,很多没有动手尝试,用一些很笨的方法。触发也是这样,级联的表如果是一个两个还好说,要是一百个(当然这就数据库冗余了,应该没有这样的数据库),就太麻烦了。编程仍未结束,要实现更好更高效率的,更简单的解决方法是我们的努力方向。...
分类:
其他好文 时间:
2014-07-19 12:02:42
阅读次数:
196
Why Hadoop2? 自从Hadoop2出现之后,其迅速取代了Hadoop1的地位,并丰富了Hadoop的应用场景。如果现在有公司使用Hadoop的话,往往直接采用Hadoop2了。
Hadoop2能被如此广泛的使用,肯定有其自身的优势,本文将对其进行梳理...
分类:
其他好文 时间:
2014-07-19 12:01:58
阅读次数:
179
1、启动journalnode时存在警告信息,sbin/hadoop-daemon.shstopjournalnodestartingjournalnode,loggingto/app/hadoop-2.2.0/logs/hadoop-root-journalnode-qasdba.outJavaHotSpot(TM)64-BitServerVMwarning:Youhaveloadedlibrary/app/hadoop-2.2.0/lib/native/libhadoop.sowhi..
分类:
其他好文 时间:
2014-07-19 02:31:55
阅读次数:
275