Fork/Join JAVA7中出现的Fork/Join,类似于分布式文件系统hadoop的mapreduce思想,就是将任务分割,再分割,直到分割到满足条件 为了便于理解:编程逻辑可以借用 递归的思想,层层递归,直到碰到最终调件,然后层层返回;而在Fork/Join中就是,类似把每个递归的方法,单 ...
分类:
编程语言 时间:
2017-06-07 18:51:12
阅读次数:
133
新手入门深度学习,选择 TensorFlow 有哪些益处? 佟达:首先,对于新手来说,TensorFlow的环境配置包装得真心非常好。相较之下,安装Caffe要痛苦的多,如果还要再CUDA环境下配合OpenCV使用,对于新手来说,基本上不折腾个几天是很难搞定的。 其次,基于TensorFlow的教学 ...
分类:
其他好文 时间:
2017-06-06 18:30:39
阅读次数:
245
OpenStack实践系列⑨云硬盘服务Cinder八、cinder8.1存储的三大分类 块存储:硬盘,磁盘阵列DAS,SAN存储 文件存储:nfs,GluserFS,Ceph(PB级分布式文件系统),MooserFS(缺点Metadata数据丢失,虚拟机就毁了) 11.2网络类型选择 对象存储:sw ...
分类:
其他好文 时间:
2017-06-06 14:12:32
阅读次数:
757
本周阅读了第七章,本章着重介绍了MFS。MSF的最大特性是商业化,并一直体现在项目的实施过程中。 所谓商业化意味着客户的商业利益。客户投入多少,得到多少回报,客户要用到哪些最新的技术,最后 如何把项目计划(Project)变成产品(Product)直至产生效益,等等,这些都是MSF要考虑的问题。 M ...
分类:
其他好文 时间:
2017-06-04 18:34:14
阅读次数:
201
MFS官方网站http://www.moosefs.org/reference-guide.html mooseFS(moose驼鹿)是一款网络分布式文件系统,它把数据分散到多台服务器上,但对于用户来讲,看到的只是一个源.MFS也像其他类unix文件系统,包含了层级结构(目录树),存储着文件属性(权 ...
分类:
其他好文 时间:
2017-06-01 23:44:49
阅读次数:
397
将本地文件拷贝到hdfs上去,结果上错误:Name node is in safe mode 这是因为在分布式文件系统启动的时候,开始的时候会有安全模式,当分布式文件系统处于安全模式的情况下,文件系统中的内容不允许修改也不允许删除,直到安全模式结束。安全模式主要是为了系统启动的时候检查各个DataN ...
分类:
其他好文 时间:
2017-05-31 16:33:44
阅读次数:
155
本文对自己开发的基于lucene和J2EE技术的搜索引擎开发经验进行简单总结。今后可能会从性能的角度总结lucene开发经验。当数据上TB级别后,分布式lucene以及结合分布式文件系统(如HDFS)或NoSQL等问题应该会成为我的技术关键点。而本文主要介绍struts2.0的关键特性和实践经验。 ...
分类:
Web程序 时间:
2017-05-29 10:03:00
阅读次数:
312
MogileFS是一套高效的文件自动备份组件,由SixApart开发,广泛应用在包括LiveJournal等web2.0站点上。MogileFS的特性:工作在应用层,无单点,自动文件复制(复制的最小单位是class,而不是文件),传输中立且使用nfs或者http协议进行传输。MogileFS的结构组成:tracker:是mog..
分类:
系统相关 时间:
2017-05-28 16:04:54
阅读次数:
365
竞争条件 竞争条件指的是程序在多个goroutine交叉执行操作时,没有给出正确的结果。竞争条件是很恶劣的一种场景,因为这种问题会一直潜伏在你的程序里,然后在非常少见的时候蹦出来,或许只是会在很大的负载时才会发生,又或许是会在使用了某一个编译器、某一种平台或者某一种架构的时候才会出现。这些使得竞争条 ...
分类:
其他好文 时间:
2017-05-27 20:09:09
阅读次数:
223
事件,当我们浏览完图片选中一张时,触发onchange事件将图片上传到服务器并回显、 Springmvc配置上传图片 FastDFS的Java接口使用 全局配置文件 fdfs_client.conf 工具类:FastDFSUtils 保存图片到FastDFS分布式文件系统 controller: ...
分类:
Web程序 时间:
2017-05-27 18:03:47
阅读次数:
635